02 2018 档案

xshell一些简单的使用---1
摘要：1.下载本地window中 2.在sftp模式下输入：put会打开xshell下载到window的位置目录 阅读全文
posted @ 2018-02-28 18:29 努力中国 阅读(163) 评论(0) 推荐(0)
spark简单快速学习及打开UI界面---1
摘要：1.远程集群测试 2.非集群，单机测试。 3.给项目打包 4.运行自己打的项目jar包(下面以 spark221.jar 为例) 示例2: Ⅰ 打开sparkUI界面 1）首先启动打开一个spark-shell 就有了 [root@hadoop-2 bin]# spark-shell 然后访问浏览器 阅读全文
posted @ 2018-02-28 18:24 努力中国 阅读(5730) 评论(0) 推荐(0)
scala简单学习---1
摘要：安装方面: 版本:scala-2.12.4.msi 环境变量: 阅读全文
posted @ 2018-02-28 15:56 努力中国
spark学习中一些小问题---1
摘要：1.linux文件查找命令。这个很关键 find / -name employees.json 2.hdfs命令上传整个文件夹或文件 hadoop dfs -put /home/root/apache-hive-1.2.1-bin/lib/ /home/root/apache-hive-1.2.1- 阅读全文
posted @ 2018-02-28 14:53 努力中国 阅读(177) 评论(0) 推荐(0)
ERROR Shell: Failed to locate the winutils binary in the hadoop binary path
摘要：在学习spark时。spark运行会报一些无用的错误:ERROR Shell: Failed to locate the winutils binary in the hadoop binary path windows的idea运行时报这个异常 只要在代码前面添加 这个是转发别人的: http:/ 阅读全文
posted @ 2018-02-27 10:24 努力中国 阅读(893) 评论(0) 推荐(0)
webpy简单入门---1
摘要：1. 2. 3. 4. 阅读全文
posted @ 2018-02-08 17:54 努力中国
python简单入门学习---1
摘要：安装环境 1. 2.Python Number 类型转换 3.Python数学函数 4.Python随机数函数 5.Python三角函数 阅读全文
posted @ 2018-02-07 10:49 努力中国
linux---学习(好的博客摘要)
摘要： 阅读全文
posted @ 2018-02-02 16:59 努力中国
大数据一些小技巧(多台主机配置免密码登录)
摘要：1.创建zookeeper集群或别的软件复制可借鉴 2.监听指定端口 下面是多台主机最简单最快配置密钥 1.第一步 2. sudo vi /etc/hosts 3. 4.下面是关键。将自己的这个密钥对复制到你想免登录的主机中。 启动不带启动窗口 vi /etc/inittab id:3:initde 阅读全文
posted @ 2018-02-01 10:58 努力中国