摘要:
Spark的安装与部署 Spark的安装部署方式有以下几种模式 Standalone YARN Mesos Amazon EC2 伪分布式部署 配置:conf/spark-env.sh vim conf/spark-env.sh # 配置jdk export JAVA_HOME=/root/trai 阅读全文
摘要:
1、编程模型 2、Worker通信机制 阅读全文
摘要:
配置zookeeper 下载zookeeper tar包 解压:tar -zxvf zookeeper-3.4.10.tar.gz -C /root/training/ 配置 cd /root/training/zookeeper-3.4.10/conf mv zoo_sample.cfg zoo. 阅读全文
摘要:
起初搭建Hadoop集群时确实相当麻烦,针对Hadoop生态中各个组件还需要考虑版本的兼容,调整诸多配置项,稍不留神就要折腾半天;有痛点就有相应的技术方案, Ambari的诞生方便了我们对整个Hadoop集群的创建、管理、监视。 Centos7制作Ambari本地源并安装 阅读全文
摘要:
Redis Cluster是Redis的分布式解决方案,在Redis 3.0版本正式推出的,有效解决了Redis分布式方面的需求。当遇到单机内存、并发、流量等瓶颈时,可以采用Cluster架构达到负载均衡的目的。 数据分布理论与Redis的数据分区 分布式数据库首要解决把整个数据集按照分区规则映射到 阅读全文
摘要:
安装 wget http://download.redis.io/releases/redis-3.0.5.tar.gz tar -zxvf redis-3.0.5.tar.gz cd redis-3.0.5 make make PREFIX=/opt/moudles/redis install 命 阅读全文
摘要:
类加载的三种机制 1、通过getClass People p =new People(); Class c = p.getClass(); 2、People.class Class c1=People.class; 3、Class.forName("tianpo.com.demo.People"); 阅读全文
摘要:
所有流对象 InputStream 字节流 FileInputStream 字节流 专门读写非文本文件的 BufferedInputStream 高效流 OutPutStream 字节流 FileOutPutStream 字节流 专门读写非文本文件的 BufferedOutputStream 高效流 阅读全文
摘要:
Java中开启多线程的三种方式 1、通过继承Thread实现 2、implements Runnable 这种方式使用较多,面向接口可以多实现 3、通过实现Callable接口+Future 关于Runable和Callable的区别 https://blog.csdn.net/heyutao007 阅读全文
摘要:
jdk、jre jdk 开发运行java必须要安装 jre 如果只是运行安装jre就可以 jdk 包含jre 自定义的称为标识符 进制 十进制:就是正常的数字 二进制:逢二进一(以0b开头) 八进制:逢八进一(以0开头) 十六进制:0-9及A-F组成(以0x开头) jvm JVM:划分 方法调用的内 阅读全文