2021年4月19日
摘要: hadoop@Master:~$ java -XX:+PrintFlagsInitial 阅读全文
posted @ 2021-04-19 15:59 ifiwereaboy 阅读(123) 评论(0) 推荐(0)
  2021年3月3日
摘要: 1.datanode日志出现 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: RECEIVED SIGNAL 15: SIGTERM https://blog.csdn.net/answer100answer/article/detail 阅读全文
posted @ 2021-03-03 15:44 ifiwereaboy 阅读(364) 评论(0) 推荐(0)
  2021年1月14日
摘要: frame3 frame4 crossDF uu2025DF ds1 ds2 repeatUserDF 阅读全文
posted @ 2021-01-14 11:20 ifiwereaboy 阅读(608) 评论(0) 推荐(0)
  2021年1月13日
摘要: 阅读全文
posted @ 2021-01-13 14:59 ifiwereaboy 阅读(254) 评论(0) 推荐(0)
  2021年1月6日
摘要: 1.研究公司电子邮件网络中的链接预测和社区检测。 https://github.com/itavares/Temporal-Link-Prediction-and-Community-Detection 2.文献引用中的链接预测 https://github.com/ApoGouv/Big-Data 阅读全文
posted @ 2021-01-06 22:48 ifiwereaboy 阅读(281) 评论(0) 推荐(0)
  2020年12月28日
摘要: 20/12/28 06:44:36 WARN TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and 阅读全文
posted @ 2020-12-28 22:48 ifiwereaboy 阅读(180) 评论(0) 推荐(0)
  2020年12月16日
摘要: 教程:http://dblab.xmu.edu.cn/blog/1714-2/#more-1714 1.安装spark (1)修改slaves文件 (2)修改spark-env.sh文件 2.将Master主机上的/usr/local/spark文件夹复制到各个节点上 在Slave节点上操作 3.启 阅读全文
posted @ 2020-12-16 20:18 ifiwereaboy 阅读(139) 评论(0) 推荐(0)
摘要: 教程:http://dblab.xmu.edu.cn/blog/2441-2/ 创建hadoop用户 切换到hadoop用户 更新apt 安装vim 前面忘切换成hadoop用户,已经安装了vim,所以 SSH登录本机 SSH配置无密码登录 安装jdk 在.bashrc文件开头添加内容 安装Hado 阅读全文
posted @ 2020-12-16 16:07 ifiwereaboy 阅读(170) 评论(0) 推荐(0)
  2020年12月14日
摘要: [hadoop@localhost yum.repos.d]$ yum makecache Loaded plugins: fastestmirror, refresh-packagekit, securityDetermining fastest mirrors * base: mirrors.a 阅读全文
posted @ 2020-12-14 19:29 ifiwereaboy 阅读(262) 评论(0) 推荐(0)
  2020年12月12日
摘要: 阅读全文
posted @ 2020-12-12 16:37 ifiwereaboy 阅读(164) 评论(0) 推荐(0)