摘要： 1、oracle中 trunc 是截取的函数，用在日期类型上，就是截取到的日或时间。 select trunc(sysdate) from dual 默认是截取系统日期到日，得到 2012-12-19 比如值为"2012-12-19 14:30:50" 的日期变量 trunc(sysdate)得到 阅读全文

摘要： 1、Apache Flink 是一个面向分布式数据流处理和批量数据处理的开源计算平台，它能够基于同一个Flink运行时，提供支持流处理和批处理两种类型应用的功能。 现有的开源计算方案，会把流处理和批处理作为两种不同的应用类型，因为他们所提供的SLA(Service-Level-Aggreement， 阅读全文

摘要： 新服务器增加用户： 1、创建一个新的组， groupadd oracle 2、useradd 命令用于建立用户账号（-g 指定用户所属的群组） useradd -g oracle oracle 3、再用passwd设定账号的密码 passwd oracle 4、配置root用户的权限，并且用普通用户 阅读全文

摘要： storm新加节点，重启topology后，出现错误 如果检查了CPU和内存不高后，还出现 java.lang.OutOfMemoryError: unable to create new native thread ，此时需要检查linux最大支持的线程数。 ulimit -u 查询当前整个系统已 阅读全文

摘要： es写入数据的工作原理是什么啊？es查询数据的工作原理是什么？底层的lucence介绍一下呗？倒排索引了解吗？ 一、es写数据过程 1、客户端选择一个node发送请求过去，这个node就是coordinating node（协调节点） 2、coordinating node 对document进行路 阅读全文

摘要： Hive理论1、Hive是什么？一个sql解析引擎，将SQL解析成MR，Hive本质就是MR2、Hive不存数据的，数据实际存在HDFS上，元数据基本上都存在mysql上3、Hive内容是读多写少，不支持数据的改写和删除4、Hive的SQL和传统SQL区别： 可扩展性：用户自定义函数 1）UDF：用 阅读全文

摘要： 一、Flink提交任务的流程 Flink任务提交后，Client向HDFS上传Flink的jar包和配置，之后向Yarn ResourceManager提交任务，ResourceManager分配Container资源并通知对应的NodeManager启动 ApplicationMaster，App 阅读全文

摘要： 一、Time 在Flink的流式处理中，会涉及到时间的不同概念 Event Time（事件时间）：是事件创建的时间。它通常由事件中的时间戳描述，例如采集的日志数据中，每一条日志都会记录自己的生成时间，Flink通过时间戳分配器访问事件时间戳 Ingestion Time（采集时间）：是数据进入Fli 阅读全文

摘要： 1，按照时间升序ls -lrt -l use a long listing format 以长列表方式显示（详细信息方式）-t sort by modification time 按修改时间排序（最新的在最前面）-r reverse order while sorting （反序） 2，按照时间降序 阅读全文

摘要： ################################### Cluster ################################### #定义集群名称,默认是elasticsearch cluster.name: elasticsearch #################################### Node ########################... 阅读全文