纯捡垃圾吃的

摘要： sed是一个很好的文件处理工具，本身是一个管道命令，主要以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作。 1. sed命令行格式 sed [选项] [命令] 1.1 选项 -n，使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到 阅读全文

摘要： 1.文档编写目的 在CDH中使用Yarn的动态资源池，用户会根据时段来区分集群资源的分配情况（如：在夜晚时段集群资源主要倾向于跑批作业，白天时段集群资源主要倾向于业务部门实时计算作业）。针对这样的需求在CDH中如何配置？本篇文章Fayson主要介绍如何通过CM配置Yarn动态资源池的计划规则。 内容 阅读全文

摘要： https://www.cnblogs.com/huxiao-tee/p/4660352.html 阅读全文

摘要： 概要 Spark流是对于Spark核心API的拓展，从而支持对于实时数据流的可拓展，高吞吐量和容错性流处理。数据可以由多个源取得，例如：Kafka，Flume，Twitter，ZeroMQ，Kinesis或者TCP接口，同时可以使用由如map，reduce，join和window这样的高层接口描述的 阅读全文

摘要： 配置java，maven等环境变量 java: export JAVA_HOME=/usr/local/java export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tool.j 阅读全文