shaadou

摘要： 1）Hadoop集群启停脚本（包含HDFS，Yarn，Historyserver）：myhadoop.sh [atguigu@hadoop102 ~]$ cd /home/atguigu/bin [atguigu@hadoop102 bin]$ vim myhadoop.sh 输入如下内容 #!/b 阅读全文

摘要： SSH无密登录配置 1）配置ssh （1）基本语法 ssh另一台电脑的IP地址 （2）ssh连接时出现Host key verification failed的解决方法 [atguigu@hadoop102 ~]$ ssh hadoop103 如果出现如下内容 Are you sure you wa 阅读全文

摘要： 编写集群分发脚本xsync 在hadoop102、hadoop103、hadoop104都已经创建好的/opt/module、 /opt/software两个目录，并且已经把这两个目录修改为atguigu:atguigu [atguigu@hadoop102 ~]$ sudo chown atgui 阅读全文

摘要： 1）用XShell文件传输工具将hadoop-3.1.3.tar.gz导入到opt目录下面的software文件夹下面 2）进入到Hadoop安装包路径下 [atguigu@hadoop102 ~]$ cd /opt/software/ 3）解压安装文件到/opt/module下面 [atguigu 阅读全文

摘要： 1）利用模板机hadoop100，克隆三台虚拟机：hadoop102 hadoop103 hadoop104 2）修改克隆机IP 修改克隆虚拟机的静态IP [root@hadoop100 ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 改成 DE 阅读全文

摘要： 1) hadoop100虚拟机配置 （1）使用yum安装需要虚拟机可以正常上网，yum安装前可以先测试下虚拟机联网情况 [root@hadoop100 ~]# ping www.baidu.com PING www.baidu.com (14.215.177.39) 56(84) bytes of 阅读全文

摘要： 1）卸载现有JDK 2）用XShell传输工具将JDK导入到opt目录下面的software文件夹下面 3）在Linux系统下的opt目录中查看软件包是否导入成功 [atguigu@hadoop102 ~]$ ls /opt/software/ 看到如下结果： jdk-8u212-linux-x64 阅读全文

摘要： 爬虫 urllib的基本应用 1.读取并显示网页内容 Python 标准库urllib.request 中的 urlopen()函数可以用来打开一个置顶的URL，打开成功之后，可以像读取文件一样使用 read() 方法来读取网页上的数据。 读取到的是二进制数据，需要使用 decode() 方法进行正 阅读全文

摘要： 面向对象程序设计 类的定义 class Car(object): #定义一个类，派生自object类 def showInfo(self): #定义成员方法 print("This is a car") 访问类中数据成员或成员的方法： car = Car() car.showInfo() 公有成员与 阅读全文

摘要： 本周学习了函数内容，进行了一些代码练习。 python中循环的方式： for循环: for 取值 in 序列或迭代对象: 循环体 例如： for i in range(1,101): if i%7 == 0 and i%5!=0: print(i) while循环： while 条件表达式: 循环体 阅读全文