随笔分类 -  notes

上一页 1 2 3 4 5 下一页
你想建设一个能承受500万PV/每天的网站吗？服务器每秒要处理多少个请求才能应对？
摘要：你想建设一个能承受500万PV/每天的网站吗？服务器每秒要处理多少个请求才能应对？你想建设一个能承受500万PV/每天的网站吗？ 500万PV是什么概念？服务器每秒要处理多少个请求才能应对？如果计算呢？PV是什么：PV是page view的简写。PV是指页面的访问次数，每打开或刷新一次页面，就算做一... 阅读全文
posted @ 2014-09-02 16:53 mjorcen 阅读(336) 评论(0) 推荐(0)
莫名其妙的主机名 VM_32_234_centos
摘要：在腾讯服务器上部署的时候出现的莫名其妙的错误,我在配置文件上都写master, node1,但是运行mapredure的时候的时候老是出现 Job job_1409546978133_0001 failed with state FAILED due to: Application applicat... 阅读全文
posted @ 2014-09-01 17:09 mjorcen 阅读(782) 评论(0) 推荐(0)
hadoop Safe mode is ON 的解决办法
摘要：hadoop Safe mode is ON 的解决办法搭了一个hadoop集群环境，近期总是出现读写文件错误的情况，查看name node的日志显示（Safe mode is ON）Safe mode is ON. The ratio of reported blocks 0.2000 has n... 阅读全文
posted @ 2014-09-01 16:53 mjorcen 阅读(1635) 评论(0) 推荐(0)
Does not contain a valid host:port authority: Master:8031 (configuration property 'yarn.resourcemanager.resource-tracker.address')
摘要：问题解决：这个错误是：yarn里面的配置的格式有错误：如：yarn.resourcemanager.addressMaster:8032 在标签之间不能有空格。去掉空格OK。异常堆栈如下2014-08-30 10:20:30,171 INFO org.apache.hadoop.service.A... 阅读全文
posted @ 2014-08-30 10:28 mjorcen 阅读(3361) 评论(0) 推荐(0)
DEPRECATED: Use of this script to execute hdfs command is deprecated.
摘要：DEPRECATED: Use of this script to execute hdfs command is deprecated.本人安装的hadoop版本是2.4.0的，但每次执行命令时都会显示下面的信息hadoop@VM_160_34_centos:/usr/local/hadoop-2... 阅读全文
posted @ 2014-08-29 21:47 mjorcen 阅读(15832) 评论(0) 推荐(0)
datanode无法连接到master
摘要：初次在VM上配置Hadoop，开了三台虚拟机，一个作namenode,jobtracker另外两台机子作datanode,tasktracker配置好后，启动集群通过http://localhost:50700查看cluster状况Hadoop配置datanode无法连接到master发现没有dat... 阅读全文
posted @ 2014-08-29 15:29 mjorcen 阅读(855) 评论(0) 推荐(0)
hadoop2.4.0 安装配置 (2)
摘要：hdfs-site.xml配置如下: dfs.namenode.secondary.http-address Master:9001 dfs.webhdfs.enabled true dfs.re... 阅读全文
posted @ 2014-08-29 14:57 mjorcen 阅读(260) 评论(0) 推荐(0)
hadoop 2.2.0 编译报错: [ERROR] class file for org.mortbay.component.AbstractLifeCycle not found
摘要：[ERROR] class file for org.mortbay.component.AbstractLifeCycle not found错误堆栈如下:[ERROR] COMPILATION ERROR : [INFO] ------------------------------------... 阅读全文
posted @ 2014-08-29 11:15 mjorcen 阅读(539) 评论(0) 推荐(0)
hadoop多次格式化后，导致datanode启动不了
摘要：hadoop多次格式化后，导致datanode启动不了,并且在datanode里面执行hadoop datanode -upgrade 会抛出如下异常:************************************************************/2014-08-27 14... 阅读全文
posted @ 2014-08-27 15:25 mjorcen 阅读(1148) 评论(0) 推荐(0)
secondarynamenode异常
摘要：secondarynamenode异常2014-08-26 22:06:12,793 ERROR org.apache.hadoop.hdfs.server.namenode.SecondaryNameNode: Exception in doCheckpointjava.io.IOExceptio... 阅读全文
posted @ 2014-08-26 22:15 mjorcen 阅读(1123) 评论(0) 推荐(0)
Hadoop NameNode is not formatted.
摘要：2014-08-26 20:27:22,712 WARN org.apache.hadoop.hdfs.server.namenode.FSNamesystem: Encountered exception loading fsimagejava.io.IOException: NameNode i... 阅读全文
posted @ 2014-08-26 20:37 mjorcen 阅读(10862) 评论(0) 推荐(0)
Hadoop Datanode节点无法启动（All directories in dfs.data.dir are invalid）
摘要：Hadoop Datanode节点无法启动（All directories in dfs.data.dir are invalid）java.io.IOException: All directories in dfs.datanode.data.dir are invalid: "/usr/loc... 阅读全文
posted @ 2014-08-26 20:14 mjorcen 阅读(2005) 评论(0) 推荐(0)
vs2013运行c语言出现：无法查找或打开 PDB 文件。
摘要：vs2013运行c语言出现：无法查找或打开PDB文件。“ConsoleApplication1.exe”(Win32): 已加载“C:\Users\hp\Documents\Visual Studio 2013\Projects\ConsoleApplication1\Debug\ConsoleAp... 阅读全文
posted @ 2014-08-25 12:37 mjorcen 阅读(5513) 评论(0) 推荐(0)
.bat批处理脚本让cmd命令行提示符cd到工作目录 (转)
摘要：打开cmd，检查命令行提示符所在的默认位置（目录），进入该目录用notepad++创建一个文件，输入@echo offrem 这个符号表示该行是注释。rem 进入f盘，需要先切换盘符，成功后才能进入该盘下的目录f:cd \myworkspace\echo Job is done然后保存文件，命名为 ... 阅读全文
posted @ 2014-08-24 17:29 mjorcen 阅读(684) 评论(0) 推荐(0)
visualvm 监控 远程 机器上的 Java 程序
摘要：JDK里面本身就带了很多的监控工具，如JConsole等。 我们今天要讲的这款工具visualvm，就是其中的一款。但是这款工具是在JDK1.6.07及以上才有的。它能够对JAVA程序的JVM堆、线程、类加载情况、JVM GC情况进行监控，是一个很好的免费的监控工具。监控范围：JDK1.4及以上版... 阅读全文
posted @ 2014-08-24 17:13 mjorcen 阅读(381) 评论(0) 推荐(0)
Tomcat 性能调优 出现java.lang.OutOfMemoryError: PermGen space
摘要：Tomcat 在部署应用中，Server报错：java.lang.OutOfMemoryError: PermGen space，问题就是Tomcat内存分配的太小了。解决办法 1：修改Tomcat\bin\catalina.bat文件。找到tomcat6 为set JAVA_OPTS=%JAVA_... 阅读全文
posted @ 2014-08-24 16:32 mjorcen 阅读(301) 评论(0) 推荐(0)
tomcat 7 下添加 shared/lib 文件夹
摘要：你打开tomcat7\conf\catalina.properties文件再打开tomcat5的,看完后, 你就知道了tomcat 5.5.35## List of comma-separated paths defining the contents of the "shared" # class... 阅读全文
posted @ 2014-08-24 16:11 mjorcen 阅读(1201) 评论(0) 推荐(0)
Hadoop 2.4.0完全分布式平台搭建、配置、安装
摘要：一：系统安装与配置Hadoop选择下载2.4.0 http://hadoop.apache.org　/　http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.4.0/JDK我用的是1.7u64 http://www.oracle.com/t... 阅读全文
posted @ 2014-08-19 22:54 mjorcen 阅读(758) 评论(0) 推荐(0)
使用ssh公钥实现免密码登录
摘要：使用ssh公钥实现免密码登录ssh 无密码登录要使用公钥与私钥。linux下可以用用ssh-keygen生成公钥/私钥对，下面我以CentOS为例。有机器A(10.207.160.34)，B(10.221.32.234)。现想A通过ssh免密码登录到B。首先以root账户登陆为例。1.在A机下生成公... 阅读全文
posted @ 2014-08-19 22:11 mjorcen 阅读(532) 评论(0) 推荐(0)
Linux下配置jdk1.7
摘要：第一步：下载jdk-7-linux-i586.tar.gzwget -c http://download.oracle.com/otn-pub/java/jdk/7/jdk-7-linux-i586.tar.gz (注：如果下载不下来，建议使用迅雷下载，然后拷贝到Linux系统上。)第二步：解压安... 阅读全文
posted @ 2014-08-19 19:12 mjorcen 阅读(253) 评论(0) 推荐(0)

上一页 1 2 3 4 5 下一页