bingmous

摘要： 目录Maven介绍Maven安装与配置安装修改本地仓库地址配置远程仓库地址idea中maven配置maven变量maven命令maven打包springboot项目使用spring-boot-maven-plugin打包可执行jar使用maven-assembly-plugin打包为可执行jar依赖 阅读全文

摘要： 第1章 HDFS概述 hdfs背景意义 hdfs是一个分布式文件系统 使用场景：适合一次写入，多次读出的场景，且不支持文件的修改。 优缺点 高容错性，适合处理大数据（数据PB级别，百万规模文件），可部署在廉价机器上 不适合低时延数据访问，无法高效存储大量小文件，不支持并发写入、随机修改（仅追加） h 阅读全文

摘要： 使用命令：hdfs dfsadmin -refreshNodes 没有显示Refresh nodes successful，而是：refreshNodes: /opt/module/hadoop-2.7.2/etc/hadoop/dfs.hosts.exclu... 阅读全文

摘要： windows无法访问hadoop web端口 windows hosts文件：C:\Windows\System32\drivers\etccentos防火墙没有关，关闭参考hadoop core-site.xml配置文件中的namenode地址：fs.de... 阅读全文

摘要： 目录 今天打开虚拟机发现无法远程，进入虚拟机后无法ping通VMnet8，发现VMnet8的属性都变成自动的了，设置后依然不通，移除所有配置后重新添加网络后解决 解决办法： 计算机 - 系统属性 - 设备管理器 - 网络适配器：右键卸载VMnet1和VMnet8 打开虚拟机 - 编辑 - 虚拟网络编 阅读全文

摘要： Help -> show log in Explorer 1) No implementation for org.apache.maven.model.path.PathTranslator was bound. while locating org.ap... 阅读全文

摘要： 目录 第1章 大数据概论 第2章 从Hadoop框架讨论大数据生态 第3章 Hadoop运行环境搭建（开发重点） 第4章 Hadoop运行模式 本地模式：默认配置 伪分布式模式：按照完全分布式模式配置，但是只有一个节点 完全分布式模式（开发重点） 第5章 Ha... 阅读全文

摘要： 目录 准备工作 jar包安装 源码编译 准备工作 CentOS可以联网，验证：ping www.baidu.com 是畅通的jar 包准备(hadoop 源码、JDK8、maven、ant 、protobuf) （1）hadoop-2.7.2-src.tar.... 阅读全文

摘要： 使用xshell自带的传输太慢 使用lrzsz进行文件互传： xshell远程linux安装工具：yum install -y lrzsz，检查是否安装成功：rpm -qa |grep lrzsz上传文件：rz，-y覆盖，就会打开本地选择文件对话框，选择文件，确定就可以上传到当前所在目录。下载文件： 阅读全文

摘要： 复习 多线程 程序、进程、线程的概念、区别并行、并发创建线程的四种方式：继承Thread、实现Runnable接口、实现Callable接口、线程池线程的生命周期线程的同步方式，三种：同步方法，同步代码块，lock线程的通信，notify，notifyAll，... 阅读全文