摘要： 一、为什么要写数据仓库设计？ 在数据分析体系架构下，不管是大数据库技术方面的还是传统数据库技术层面，数据仓库都是必不可少，不能避免的环节，而这两种方式差别是数据存储、数据处理理念的不同。 二、分析云需要什么样的数仓架构？ 数据仓库的概念想必都看过很多遍，这里就不赘述了。咱就以业务开局。 想象一下，零 阅读全文

摘要： 一、分析云是一个BI平台工具 分析云是一个BI平台工具，主要面向对象是中小企业开发的，易于安装部署，基于传统数据库的数仓架构。故对中小企业来说，只要有个懂数据库的人，通过一些学习，利用分析云可以很好建立自己公司的BI体系。 二、为什么是分析云而不是其他产品 1、分析云是轻量级的产品，本身数据存储在s 阅读全文

摘要： 做为一个业务马拉松爱好者和一个不太专业的IT从业者（十多年开发不会，业务略懂，没形成自己的价值体系，啥啥没心得，得过且过十几年），在马拉松的时候想到了这个对照关系。 那就随便写写，看到了博君一笑。 hadoop的map阶段，是通过transform操作，将数据进行转换，这个阶段数据都是在各个机器上， 阅读全文

摘要： 今天接到一个这个要求，就是脚本执行结果中包含某个字符串，要求查出来。 我给的思路是 按照脚本名和结果 以 追加 的方式写入文本，然后从这个文本中查找相应的内容。 对方给的思路是以执行结果来判断，就自己实现了这种方式 首先是按照目录写入脚本，这里是在脚本中写入了echo $i的内容。也就是脚本有执行结 阅读全文

摘要： 一、使用pymysql进行交互 安装::: pip install pymysql pymysql主要是使用原生sql与mysql进行交互，示例如下： 2、获取自增ID 3、执行查询，获取数据 注： 1. 在fetch数据时按照顺序进行，可以使用cursor.scroll(num,mode)来移动游 阅读全文

摘要： 一、什么是数据库？ 数据库（Database）是按照数据结构来组织、存储和管理数据的仓库，每个数据库都有一个或多个不同的API用于创建，访问，管理，搜索和复制所保存的数据。我们也可以将数据存储在文件中，但是在文件中读写数据速度相对较慢。所以，现在我们使用关系型数据库管理系统（RDBMS）来存储和管理 阅读全文

摘要： 一、redis简介 redis是业界主流的key-value nosql 数据库之一。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash（哈希类型）。这些数据类型都支持p 阅读全文

摘要： 一、简介 RabbitMQ，它是干嘛用的呐？它是用来发消息的，消息队列，那它跟我们之前的学习的python的线程queue和进程的queue有什么区别呢？其实他们干的事情都是一样的。先来说说我们之前学习的python的queue吧。 如果是两个独立的程序，即便是python 程序，两个完全独立的py 阅读全文

摘要： 一、#socketserver 实现并发处理。对socket的再封装。#overding 覆盖 request 请求 handle 处理 subclass 继承 instantiate 实例化#handle_request 只处理一个请求 server_forever 处理多个请求，永远执行#定义重 阅读全文

摘要： 面向过程 VS 面向对象 编程范式 编程是 程序 员 用特定的语法+数据结构+算法组成的代码来告诉计算机如何执行任务的过程 ， 一个程序是程序员为了得到一个任务结果而编写的一组指令的集合，正所谓条条大路通罗马，实现一个任务的方式有很多种不同的方式， 对这些不同的编程方式的特点进行归纳总结得出来的编程 阅读全文