---江北

摘要： 在Python中，一个.py文件就称之为一个模块（Module）。（例如main.py就称之为main模块） 为了避免模块名冲突，Python又引入了按目录来组织模块的方法，称为包（Package）。 每一个包目录下面都会有一个__init__.py的文件，这个文件是必须存在的（使用pycharm建 阅读全文

摘要： 更多实例：参考：https://blog.csdn.net/u013398034/article/details/78701714 一、高阶函数 1.可以通过变量指向函数，达到类似别名的效果： 2.函数的参数可以是函数，也就是函数可以作为一个入参 以下介绍几个高阶函数 map、reduce 这两个函 阅读全文

摘要： 一、切片 对于取指定索引的值，python提供了切片来简化傻傻的循环 其他诸如负数之类也是一如既往的支持的 更多切片操作，参考：https://www.liaoxuefeng.com/wiki/1016959663602400/1017269965565856 二、迭代 普通遍历可以使用循环 遍历d 阅读全文

摘要： 一、概述 python和其他高级语言一样，支持函数 注意和scala不一样，结果必须使用return，否则默认return None！这和scala最后一个值作为返回是不一样的！ 二、函数调用 和其他语言一样，写出函数名，传入合适的参数即可，例如调用内置函数abs： 函数支持别名： 如果传入了错误的 阅读全文

摘要： 一、基本语法 1.行和缩进 Python中，不使用括号来表示代码的类和函数定义块或流程控制。 参考：https://www.w3cschool.cn/python3/python3-basic-operators.html 官方中文文档参考：https://docs.python.org/zh-cn 阅读全文

摘要： 一、概述 与IDEA同一家——Jetbrains出品的IDE，强大之处不再赘述 二、安装 点击下载一个合适的版本 参考网友的激活方式激活：https://blog.csdn.net/u014044812/article/details/78727496 这里就使用简单的license server： 阅读全文

摘要： 一、概述 推荐路神的ES权威指南翻译：https://es.xiaoleilu.com/010_Intro/00_README.html 官网：https://www.elastic.co/cn/products/elasticsearch 精品博文：https://blog.csdn.net/la 阅读全文

摘要： 一、概述 1.logstash是什么 根据官网介绍： Logstash 是开源的服务器端数据处理管道，能够同时 从多个来源采集数据、转换数据，然后将数据发送到您最喜欢的 “存储库” 中。（我们的存储库当然是 Elasticsearch。） //属于elasticsearch旗下产品（JRuby开发， 阅读全文

摘要： 前一篇中数据源采用的是从一个socket中拿数据，有点属于“旁门左道”，正经的是从kafka等消息队列中拿数据！ 主要支持的source，由官网得知如下： 获取数据的形式包括推送push和拉取pull 一、spark streaming整合flume 1.push的方式 更推荐的是pull的拉取方式 阅读全文

摘要： 一、概述 1.什么是spark streaming Spark Streaming is an extension of the core Spark API that enables scalable, high-throughput, fault-tolerant stream processi 阅读全文