Do It Now

摘要： 说明： 版本：ideaIU-2019.3.3.win.zip + 补丁（jetbrains-agent.jar + important.txt） 1，安装IDEA 解压版IDEA安装：将IDEA解压到 D:\Program Files\ideaIU-2019.3.3.win 后，进入 bin 文件夹 阅读全文

摘要： 一，通过importTsv导入数据 通过org.apache.hadoop.hbase.mapreduce.ImportTsv类来将数据导入hbase中。 1，将文件上传到hadoop的HDFS文件系统中 [hadoop@master share]$ hadoop fs -put student.t 阅读全文

摘要： 说明： 版本：IDEA2019.3.3 + spark-2.0.0 + scala-2.11.8 + win10 一，准备 1，打开 Plugins Configure -> Plugins 2，安装 scala 插件 搜索 scala 然后点击 Install 安装。 如果不想在线安装，也可以在  阅读全文

摘要： 说明行中：括号内表示参数，递进关系，包含同级，同级不递进。“+”表示可以多个。“|”后表示为可选参数 信息查看 hbase启动/hbase shell启动 start-hbase.sh hbase shell 查看表操作的帮助信息 table_help 查看具体操作的帮助信息 help 'put' 阅读全文

摘要： 1，输出信息汇总后只显示查找到的包含(Row)的行 （执行程序） 2>&1 | grep "Row" 2，用户变量修改和更新 vi ~/.bashrc source ~/.bashrc 3，关机和重启 reboot 普通重启 shutdown -r now 立刻重启 shutdown -r 10 1 阅读全文

摘要： 说明：安装mysql和Hive，单纯以学习hadoop为目的。 版本：VMware 15 + CentOS 7 + Hadoop 2.6 + hive 1.1 + mysql 5.7 +putty + win10 系列： 一，安装mysql 1，卸载 MariaDB 先查看系统附带的 mariadb 阅读全文

摘要： 结论： 1，简单的hadoop项目(Maven)在Create JAR from Modules页面中，最简单的方式为Main Class为空，选择extract to the target JAR。这样不会指定主类，不会生成MANIFEST.MF文件。 2，Main Class会在jar包内的MA 阅读全文

摘要： 说明：在IDEA上进行编写简单的hadoop程序，适用于个人简单入门 版本：IDEA2019.3.3 + Hadoop2.6 + java8 + win10 系列： 一，创建项目 1，创建项目 2，选择Maven，选择自己的JDK，不用选择Create from archetype(创建表单原型)， 阅读全文

摘要： 说明：搭建hadoop伪分布式，单纯以学习hadoop为目的。 版本：VMware 15 + CentOS 7 + Hadoop 2.6 + Java 8 + putty + win 10 系列： 一，网络配置 1，查看主机名，修改为master [hadoop@master ~]$ sudo vi 阅读全文

摘要： 说明：搭建hadoop前准备，单纯以学习hadoop为目的 版本：VMware 15 + CentOS 7 + Hadoop 2.6 + putty + win 10 系列： 一，配置VMware虚拟网络编辑器 1，打开编辑 -> 虚拟网络编辑器 2，更改设置 -> 选择NAT模式 -> 关闭使用本 阅读全文