摘要： 悲观锁(Pessimistic Lock), 顾名思义，就是很悲观，每次去拿数据的时候都认为别人会修改，所以每次在拿数据的时候都会上锁，这样别人想拿这个数据就会block直到它拿到锁。传统的关系型数据库里边就用到了很多这种锁机制，比如行锁，表锁等，读锁，写锁等，都是在做操作之前先上锁。 乐观锁(Op 阅读全文

摘要： hadoop2.6.4 jdk1.8 spark2.0.1 方案1： 在spark的conf目录下，修改spark-env.sh文件加入LD_LIBRARY_PATH环境变量，值为hadoop的native库的路径 方案2： 在 /etc/profile 设置一下 export LD_LIBRARY 阅读全文

摘要： 一、说明 Solaris 10 出于安全原因，默认参数很严格，禁止root用户直接使用ssh登陆 二、处理 1、可以先用非root的帐户，登陆到ssh后，su成root 2、如果想直接用root登陆，则修改如下配置文件： vi /etc/ssh/sshd_config 找到其中的如下一行，将前边的# 阅读全文

摘要： 1、修改用户进程可打开文件数限制 在Linux平台上，无论编写客户端程序还是服务端程序，在进行高并发TCP连接处理时，最高的并发数量都要受到系统对用户单一进程同时可打开 文件数量的限制(这是因为系统为每个TCP连接都要创建一个socket句柄，每个socket句柄同时也是一个文件句柄)。可使用uli 阅读全文

摘要： location ~/M00{ # root /fdfs/storage/data; # if ($request_filename ~* ^.*?\.(pdf)$){ add_header Content-Type 'application/pdf;'; } root /opt/fastdfs_s 阅读全文

摘要： 我们要达到这样的效果 但是Job对象的实例化过程是在Quartz中进行的，AppOrderService是在Spring容器当中的，那么如何将他们关联到一起呢。好在Quartz提供了JobFactory接口，让我们可以自定义实现创建Job的逻辑。 那么我们通过实现JobFactory 接口，在实例化 阅读全文

摘要： 介绍 Spring-Data-Redis项目（简称SDR） 是对Redis的Key-Value数据存储操作提供了更高层次的抽象，提供了一个对几种主要的redis的Java客户端（例 如：jedis，jredis，jdbc-redis等）的抽象，使开发中可以几乎完全屏蔽具体使用客户端的影响，使业务代码 阅读全文

摘要： conf/server.xml 打开：<Executor name="tomcatThreadPool" namePrefix="catalina-exec-" maxThreads="1000" minSpareThreads="350" /> 修改链接参数： 默认值： <Connector po 阅读全文

摘要： 2台主机 192.168.30.207 Master 192.168.30.251 Node1 三台主机检查 ~/.ssh 文件夹没有则新建 ssh-keygen -t rsa 一路狂按回车,最终生成（id_rsa,id_rsa.pub两个文件）. 把authorized_keys 复制到node上 阅读全文

摘要： 三台虚拟机，IP地址通过路由器静态DHCP分配 （这样就无需设置host了）。 三台机器信息如下 - 1. hadoop-a: 192.168.0.20 #master 2. hadoop-b: 192.168.0.21 #slave 3. hadoop-c: 192.168.0.22 #slave 阅读全文