上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 24 下一页
摘要: 举例: A机器的a用户,希望在A机器上,使用b用户的身份登录到B机器! ssh b@B 实现步骤: ①A机器的a用户,在A机器上生成一对密钥 ssh-keygen -t rsa,然后三次回车即可。 ②密钥分为公钥和私钥,a用户需要将公钥拷贝到B机器上b用户的家目录下的.ssh隐藏目录下的author 阅读全文
posted @ 2020-07-06 16:01 孙晨c 阅读(120) 评论(0) 推荐(0) 编辑
摘要: 1. scp(安全拷贝) 又称为全量复制,每次复制都会复制所有文件。 使用: scp -r 源文件用户名A@主机名1:path1 目标文件用户名B@主机名2:path2 -r: 递归,复制目录 执行过程: 在主机1上,使用A用户读取path1的文件 再使用用户B登录到主机2,在主机2的path2路径 阅读全文
posted @ 2020-07-06 15:56 孙晨c 阅读(839) 评论(0) 推荐(0) 编辑
摘要: 1.规划 Hadoop中的进程在多台机器运行! HDFS: 1个nn+N个DN n个2nn YARN: 1个RM+N个NM 避免单点故障,NN和RM建议分散到多台机器! 注意负载均衡 | hadoop101 | hadoop102 | hadoop103 | |--|--|--| | DN |DN 阅读全文
posted @ 2020-07-06 15:45 孙晨c 阅读(107) 评论(0) 推荐(0) 编辑
摘要: 登录脚本的执行顺序:【注:仅适用于 bash shell】 Login-Shell 是指登录时,需要提供用户名密码的shell,如:su – user1 , 图形登录, ctrl+alt+F2-6进入的登录界面。 这种Login shell 执行脚本的顺序: 1./etc/profile 【全局pr 阅读全文
posted @ 2020-07-06 15:39 孙晨c 阅读(225) 评论(0) 推荐(0) 编辑
摘要: 一、分布式HDFS的安装和启动 ①在$HADOOP_HOME/etc/hadoop/core-site.xml文件 <configuration> <property> <name>fs.defaultFS</name> <!-- 告知NN在哪个机器,NN使用哪个端口号接收客户端和DN的RPC请求. 阅读全文
posted @ 2020-07-05 15:31 孙晨c 阅读(235) 评论(0) 推荐(0) 编辑
摘要: 一、Hadoop的安装 ①Hadoop运行的前提是本机已经安装了JDK,配置JAVA_HOME变量 ②在Hadoop中启动多种不同类型的进程 例如NN,DN,RM,NM,这些进程需要进行通信! 在通信时,常用主机名进行通信! 在192.168.6.100机器上的DN进程,希望访问192.168.6. 阅读全文
posted @ 2020-07-05 15:26 孙晨c 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 一、Hadoop 1.hadoop的初衷是采用大量的廉价机器,组成一个集群!完成大数据的存储和计算! 2.hadoop历史版本 hadoop 1.x HDFS: 负责大数据的存储 Common: HDFS和MR共有的常用的工具包模块! MapReduce: 负责计算,负责计算资源的申请的调度! 完成 阅读全文
posted @ 2020-07-04 20:48 孙晨c 阅读(244) 评论(0) 推荐(0) 编辑
摘要: 1.检查xml文件所在package名称是否和Mapper interface所在的包名 或者 mapper的namespace写的不对!!!注意修改。 2.UserDao的方法在UserDao.xml中没有,然后执行UserDao的方法会报此 3.UserDao的方法返回值是List,而selec 阅读全文
posted @ 2020-05-21 22:59 孙晨c 阅读(171) 评论(0) 推荐(0) 编辑
摘要: 先看一张流程图,实线部分为spring框架完成,虚线部分(==即contronller调用业务层部分==)才是我们需要动手完成的 简要分析执行流程: 1.DispatcherServlet表示前置控制器,是整个SpringMVC的控制中心。用户发出请求,DispatcherServlet接收请求并拦 阅读全文
posted @ 2020-05-20 00:17 孙晨c 阅读(152) 评论(0) 推荐(0) 编辑
摘要: 推荐大家看完上一篇 "伪分布搭建" ,在上一篇中,基础条件都有详细配置过程,本次全分布式搭建只是在伪分布的基础上有所加深。 相较于伪分布,多了以下内容 第一步:添加主机名与IP映射(每个节点都要配置) 第二步:主从节点免密登陆 在每个用户的家目录下的.ssh目录: 或者在主节点的家目录下的.ssh目 阅读全文
posted @ 2020-05-17 20:36 孙晨c 阅读(222) 评论(0) 推荐(0) 编辑
上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 24 下一页