2019年11月16日
六、SparkStreaming
摘要： 1. 概述 "Spark 以及 spark streaming 核心原理及实践" Spark Streaming用于流式数据的处理。Spark Streaming支持的数据输入源很多，例如： Kafka、Flume、Twitter、ZeroMQ、简单的TCP套接字等等。 数据输入后可以用Spark的 阅读全文
posted @ 2019-11-16 20:15 qingfeng68 阅读(337) 评论(0) 推荐(0)
Hadoop的fsck命令的使用
摘要： ![](https://img2018.cnblogs.com/blog/1852959/201911/1852959-20191116194250197-55918226.png) 阅读全文
posted @ 2019-11-16 19:43 qingfeng68 阅读(1114) 评论(0) 推荐(0)
Hive SQL中关于反引号的使用
摘要： 当遇到存在以下划线开头的字段的表时，例如“_c1”，如图所示 常规的无引号字段查询会报错，如图所示： 应该使用“`”对字段进行引用，如图所示： 所以在Hive中使用SQL语句时，查询操作最好将字段用“`”引用起来，避免查询以下划线开头字段的时候出现错误。 注意：当将添加了反引号的sql语句放在she 阅读全文
posted @ 2019-11-16 17:30 qingfeng68 阅读(1880) 评论(0) 推荐(0)