Vowzhou

摘要： HDFS安全模式 $>hdfs dfsadmin -safemode get //查看 $>enter 进入 ，leave 退出 $>wait 等待( enter ) 配置Hadoop的最小Blocksize 必须是512的倍数 【hdfs-site.xml】 dfs.namenode.fs-lim 阅读全文

摘要： context它是mapper的一个内部类， 简单的说顶级接口是为了在map或是reduce任务中跟踪task的状态， 很自然的MapContext就是记录了map执行的上下文， 在mapper类中，这个context可以存储一些job conf的信息，比如job运行时参数等，我们可以在map函数中 阅读全文

摘要： 基于公钥的安全验证。1、用户将自己的公钥放在服务器上。 2、服务器向客户机发送一段随机字符串。 3、客户机利用自己的私钥对随机字符串进行加密，发送给服务器。 4、服务器利用事先存储的公钥解密，解密出来正确，允许登陆，否则，拒绝登陆。 阅读全文

摘要： Hadoop HDFS 文件访问权限问题导致Java Web 上传文件到Hadoop失败的原因分析及解决方法 hadoop集群文件访问权限hdfsjava webtomcat 个人分类： hadoop开发 Hadoop HDFS 文件访问权限问题导致Java Web 上传文件到Hadoop失败的原因 阅读全文

摘要： Linux文件类型 - //文件 d //目录 l //链接,类似于windows快捷方式. b //block,块文件。 c //字符文件 Linux文件权限 x //execute w //write r //read Linux用户分配 u //user【当前用户】 g //group【用户组 阅读全文

摘要： 青玉案·元夕 创建连接文件，ln 1.硬连接 两个完全相同文件，类似于实时备份，相互实时备份。两个文件之间完全同步。 删除时，只删一个。 目录不能使用硬链接。 ln a.txt alink //a.txt:目标文件, alink:连接名称. 2.符号连接[重要]软连接 相当于快捷方式. 可以对文件， 阅读全文

摘要： Hadoop fundamentals ：Hadoop原理 英 [ˌfʌndə'mentlz] 美 [ˌfʌndə'mentlz] n.原理; 基本原则，基本法则( fundamental的名词复数); 玲珑骰子安红豆，入骨相思君知否 阅读全文

摘要： 分布式文件系统 删除：> hdfs dfs -rmdir --ignore-fail-on-non-empty /user/centos/java 【一次只能删除一级】 在hdfs文件系统的根目录创建一个文件夹data01 hadoop fs -mkdir /data01 查看创建的目录 hadoo 阅读全文

摘要： MySQL数据库的备份与恢复 生成SQL脚本 导出数据 在控制台使用mysqldump命令可以用来生成指定数据库的脚本文本，但要注意，脚本文本中只包含数据库的内容，而不会存在创建数据库的语句！所以在恢复数据时，还需要自已手动创建一个数据库之后再去恢复数据。 mysqldump–u用户名 –p密码 数 阅读全文

摘要： 2018-12-22 09:18:00 每个人几乎都有自己害怕的东西，可能是蜘蛛，可能是高度，也可能是密闭的空间。 当面临这些“威胁”时，我们可能会心跳过速、手心冒汗。这被称为威胁恐惧反应，它的存在是为了帮助我们规避那些潜在的痛苦。 大多数人只会在面临威胁时才会感到害怕。 但当威胁恐惧反应出现时（即 阅读全文