07 2017 档案

Spark Streaming之dataset实例
摘要：Spark Streaming是核心Spark API的扩展，可实现实时数据流的可扩展，高吞吐量，容错流处理。 bin/spark-submit --class Streaming /home/wx/Stream.jar hadoop fs -put /home/wx/123.txt /user/w 阅读全文
posted @ 2017-07-31 19:59 智能先行者 阅读(1328) 评论(0) 推荐(1)
Spark连接MongoDB之Scala
摘要：MongoDB Connector for Spark Spark Connector Scala Guide spark-shell --jars "mongo-spark-connector_2.11-2.0.0.jar,mongo-hadoop-core-2.0.2.jar,mongo-jav 阅读全文
posted @ 2017-07-14 15:34 智能先行者 阅读(2889) 评论(0) 推荐(2)