2016年8月9日
摘要：
两天时间，知道现在才把这个东西解决 解决的灵感来源于百度知道一句话谢谢这个哥们 谢谢这个哥们！ 谢谢这个哥们！ 我的目录是在/home/hadoop/tmp 大家如果遇到这个问题，希望能按照我的办法去试一下 2016年1月18日04:00:49 阅读全文
摘要：
zoo.cfg 1、server.1/2/3 有几台配置几个 2、配置好hosts映射之后可以用node1替代IP地址 3、dataLogDir 下面配置的logs 的目录一定要创建 4、dataDir 配置的目录下面一定要创建一个文本，里面写上server.（点）之后那个数字，每个节点都要写 5 阅读全文
摘要：
MySQL无法select 和 delete,update同时进行 只有将group By 出来不重复的数据进行insert到一张和之前同样类型的新表里面 转换思路，解决问题！ 阅读全文
摘要：
1、截取 65534条数据，进行分sheet，然后1个sheet导入一张表，最后进行整合！ 2、采用TXT导入方式，TXT的导入暂时没发现限制的数据条数，下午用TXT导入74万条数据成功 3、如果遇到log型的日志导入MySQL，可以直接复制成TXT，然后利用分隔符加上表头进行导入 阅读全文
摘要：
在eclipse下配置hadoop location的时候 hadoop端口号应该与conf文件夹下的core-site.xml以及mapred-site.xml保持一致 前者对应dfs master，后者对应map-red master //这是mapred-site.xml mapred.job.tracker http://master.hadoop:90... 阅读全文
摘要：
UPDATE `bj_agent_new` SET Compay= CONCAT(substring_index(`Compay`,'开发商',1),'开发商') WHERE Compay LIKE '%开发商%'; sql附上 阅读全文
摘要：
log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j:WARN Please initialize the log4j system properly. log4j:WARN See http://logging.apach... 阅读全文
摘要：
转载： 大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有各的用处，互相之间又有重合。你可以用汤锅直接当碗吃饭喝汤，你可以用小刀或者刨子去皮。但是每个工具有自己的特性，虽然奇怪的组合 阅读全文
摘要：
1、数据已经load进去hdfs 2、hive、hbase已经安装成功（我用的是hadoop 2.4 hbase 0.98.12 hive 1.2.1） 3、开始！ 4、在hive建立表同时生成对应的一张Hbase表，分别在hive和hbase用show tables;和list查看是否生成对应的表 create table hive3 (key string,phone string... 阅读全文
摘要：
最近用本地Navicat连接集群的mysql，报了上述的错误，我认为是权限问题 之前试过赋权限给所有人，但是我这边还是连接不上，无奈，试试只分给我一个IP 开始：mysql -uroot -p //先登录mysql 我用的root用户 登录成功 mysql> 然后开始赋权限： 1、GRANT A 阅读全文
