04 2019 档案

MapReduce基础
摘要：阅读目录 一、MapReduce 计算框架-执行流程 1、MapReduce 计算框架-执行流程 二、MapReduce深入 1、示例一、文件的分发与打包 ● 如果程序运行所需要的可执行文件、脚本或者配置文件在Hadoop集群的计算节点上不存在，则首先需要将这些文件分发到集群上才能成功进行计算。Ha 阅读全文
posted @ 2019-04-29 22:55 Simon92 阅读(387) 评论(0) 推荐(1)
Hive的原理
摘要：阅读目录 一、Hive内部表和外部表 0、Hive是什么？ Hive是一个SQL解析引擎，将SQL语句转译成MR Job,然后再Hadoop平台上运行，达到快速开发的目的。 Hive中的表是纯逻辑表，就只是表的定义等，即表的元数据。本质就是Hadoop的目录/文件，达到了元数据与数据存储分离的目的 阅读全文
posted @ 2019-04-28 00:43 Simon92 阅读(1509) 评论(0) 推荐(2)
Python之路【第八篇】:Python模块
摘要：阅读目录 一、模块和包 模块(module)的概念： 在计算机程序的开发过程中，随着程序代码越写越多，在一个文件里代码会越来越长，越来越不容易维护。 为了编写可维护的代码，我们把很多函数分组，分别放到不同的文件里，这样，每个文件包含的代码就相对较少，很多编程语言都采用这种组织代码的方式。在Pytho 阅读全文
posted @ 2019-04-22 23:11 Simon92 阅读(512) 评论(0) 推荐(2)
python查询修改配置文件功能
摘要：阅读目录 一、python查询功能代码 1、查询修改配置文件 global log 127.0.0.1 local2 daemon maxconn 256 log 127.0.0.1 local2 info defaults log global mode http timeout connect 阅读全文
posted @ 2019-04-19 15:01 Simon92 阅读(537) 评论(0) 推荐(1)
Python之路【第七篇】:Python装饰器
摘要：阅读目录 一、装饰器 1、装饰器的概念 #装饰器定义：本质就是函数，功能是为其他函数添加附加功能 二、装饰器需要遵循的原则 三、实现装饰器知识储备 四、高阶函数 五、函数嵌套 六、闭包 1、闭包 2、函数闭包装饰器基本实现 3、函数闭包加上返回值 4、函数闭包加上参数 使用可变长参数代码如下：达到的 阅读全文
posted @ 2019-04-18 06:54 Simon92 阅读(426) 评论(1) 推荐(1)
Python之路【第六篇】:Python迭代器、生成器、面向过程编程
摘要：阅读目录 一、迭代器 1、迭代的概念 #迭代器即迭代的工具，那什么是迭代呢？ #迭代是一个重复的过程，每次重复即一次迭代，并且每次迭代的结果都是下一次迭代的初始值 代码如下： 2、为何要用迭代器?什么是可迭代对象？什么是迭代器对象？ 3、迭代器对象的使用 4、for循环 5、迭代器的优缺点 二、生成 阅读全文
posted @ 2019-04-14 23:00 Simon92 阅读(293) 评论(0) 推荐(1)
Python之路【第五篇】:Python基础之文件处理
摘要：阅读目录 一、文件操作 1、介绍 计算机系统分为：计算机硬件，操作系统，应用程序三部分。 我们用python或其他语言编写的应用程序若想要把数据永久保存下来，必须要保存于硬盘中，这就涉及到应用程序要操作硬件，众所周知，应用程序是无法直接操作硬件的，这就用到了操作系统。操作系统把复杂的硬件操作封装成简 阅读全文
posted @ 2019-04-14 18:11 Simon92
Python之路【第四篇】:Python基础之函数
摘要：函数的理解 面向过程：根据业务逻辑从上到下垒代码 函数式：将某功能代码封装到函数中，日后便无需重复编写，仅调用函数即可 函数作用是你的程序有良好的扩展性、复用性。 同样的功能要是用3次以上的话就建议使用函数。 特殊理解： 函数可以理解为一个一个的功能块，你把一个大的功能拆分成一块一块的，用某项功能的 阅读全文
posted @ 2019-04-14 18:10 Simon92