文章分类 -  SPARK

摘要:要完成用SPARK将hadoop的文件数据转换为hive的表。首先,要安装好hadoop,hive,spark;其次,文本数据是结构化的文本,可以直接映射到表的如csv格式的。 我们的文本数据集由五个字段组成的,用tab符号隔开,存放在hadoop的hdfs:///data/source/tmpda 阅读全文
posted @ 2016-10-24 22:48 菜鸟还不到 阅读(4785) 评论(0) 推荐(0)