2017年4月18日
Spark学习笔记——读写HBase
摘要： 1.首先在HBase中建立一张表，名字为student 参考 Hbase学习笔记——基本CRUD操作 一个cell的值,取决于Row,Column family,Column Qualifier和Timestamp HBase表结构 2.往HBase中写入数据，写入的时候，需要写family和col 阅读全文
posted @ 2017-04-18 17:20 tonglin0325 阅读(679) 评论(0) 推荐(0)
Spark学习笔记——读写HDFS
摘要： 使用Spark读写HDFS中的parquet文件 文件夹中的parquet文件 build.sbt文件 Scala实现方法 df.show打印出来的信息，如果没放在一个case class中的话，name,url,info,summary这列信息会变成1,2,3,4 使用spark-shell查看写 阅读全文
posted @ 2017-04-18 14:54 tonglin0325 阅读(906) 评论(0) 推荐(0)