摘要： 代码结构 BeanWritable:往数据库读写使用的bean ControlJobTest:JobControl任务控制 DBInputFormatApp:将关系型数据库的数据导入HDFS,其中包含了Map、Reduce,内部静态类 DBOutputFormatApp:将HDFS的结构化数据导入关 阅读全文

摘要： ntfs优盘插在Linux上是无法直接使用的，需要安装ntfs插件才可使用 centos上安装ntfs-3g 下载ntfs-3g安装包，上传至需要安装的服务器并解压 cd 进入ntfs-3g目录,依次执行以下命令 此时已安装完毕，插入优盘，挂载使用 mount -t ntfs-3g /dev/sdb 阅读全文

摘要： 使用MapReduce将Mysql数据导入HDFS代码链接 将HDFS数据导入Mysql,代码示例 打成jar包，放在服务器上，执行hadoop jar命令 任务结束后mysql表中即可发现数据已经有了。 阅读全文

摘要： 在mysql新建一张表 people 写入几条测试数据。 将mapreduce作业打成jar包，上传到Hadoop集群服务器，执行。 因为代码中已经指定了写入HDFS的路径，所以此处不需要传参，只需指定job所在类即可。 在运行中如果提示mysql驱动找不到，如下 解决办法： 将mysql jdbc 阅读全文

摘要： Linux离线同步时间 思路：以其中一台时间为准 脚本 注意脚本中的 `符号 开启定时任务,每天的五点十分执行 crotab -e 10 5 * * * SameTime.sh 10:分 5：时 第一个* ：日 第二个*：月 第三个*：周 阅读全文

摘要： 多台服务器配置免密登陆 假设三台服务器192.168.1.111（node1）、192.168.1.112(node2)、192.168.1.113(node3) 比如hadoop用户下 groupadd hadoop 新建hadoop用户组 useradd -g hadoop hadoop had 阅读全文

摘要： Linux查看端口占用进程 netstat -anlp|grep 8081 此处3195为进程ID 阅读全文

摘要： 修改文件读写执行权限 rwx rwx rwx 分为三段，用户权限 用户组权限 其他人权限 r-r-r 添加权限 chmod +w test.txt rw-r-r默认在用户权限下添加 chmod u+w/r/x test.txt 给用户添加权限 chmod g+w/r/x test.txt 给用户组添 阅读全文

摘要： Linux查看外网IP curl cip.cc curl ifconfig.me curl ipinfo.io 阅读全文

摘要： linux载入优盘 查看优盘 ls /dev/ sdb1 挂载到/mnt/usb目录 mount /dev/sdb1 /mnt/usb ntfs优盘需要安装ntfs-3g mount -t ntfs-3g /dev/sdb1 /mnt/usb 卸载优盘 umount /mnt/usb 阅读全文