摘要: 这里给大家列出来了一部分Sqoop操作时的常用参数,以供参考,需要深入学习的可以参看对应类的源代码。 序号 命令 类 说明 1 import ImportTool 将数据导入到集群 2 export ExportTool 将集群数据导出 3 codegen CodeGenTool 获取数据库中某张表 阅读全文
posted @ 2021-10-28 23:30 Vincen#1_33 阅读(589) 评论(0) 推荐(0) 编辑
摘要: sqoop实际原理 将导入或导出命令翻译成mapreduce程序来实现。 在翻译出的mapreduce中主要是对inputformat和outputformat进行定制。 sqoop的导入数据 在Sqoop中,“导入”概念指:从非大数据集群(RDBMS)向大数据集群(HDFS,HIVE,HBASE) 阅读全文
posted @ 2021-10-28 23:28 Vincen#1_33 阅读(33) 评论(0) 推荐(0) 编辑
摘要: Sublime Text3使用SublimeREPL关联Python报错找不到文件 当通过上面的步骤进行绑定Python后,弹窗报错“找不到文件”之类的,可以使用以下方法解决 方法: 首选项--》package setting--》SublimeREPL--》setting user后,输入以下内容 阅读全文
posted @ 2021-06-23 22:18 Vincen#1_33 阅读(841) 评论(0) 推荐(0) 编辑
摘要: 预备知识 关于系统提示符的说明: 终端命令行显示:$,表示普通用户 终端命令行显示:#,表示管理员用户root,root用户是整个Linux系统中的最高权限用户。 (执行脚本的时候,最好不要使用root用户来执行,因为root拥有系统的最高权限,避免命令错误是,对系统造成严重的影响) 阅读全文
posted @ 2021-06-02 21:50 Vincen#1_33 阅读(27) 评论(0) 推荐(0) 编辑