随笔分类 -  大数据

摘要:云计算通俗来说就是输入/输出和计算不在一个主机上。计算要用到计算设备,计算设备一般是指CPU、内存和硬盘,输入/输出设备一般是指键盘、鼠标、显示器、耳机、音响、话筒等外设。而我们的个人计算机是使用主板将这些东西连接到一起来协调工作。 一个软件在执行以完成某项任务的时候,如果用到的计算设备和输入/输出 阅读全文
posted @ 2018-03-14 13:19 翔宇编程 阅读(65400) 评论(3) 推荐(13)
摘要:localsrc dst 追加文件 1,Hadoop fs –fs [local | <file system URI>]:声明hadoop使用的文件系统,如果不声明的话,使用当前配置文件配置的,按如下顺序查找:hadoop jar里的hadoop-default.xml->$HADOOP_CONF 阅读全文
posted @ 2016-11-27 15:28 翔宇编程 阅读(246) 评论(0) 推荐(0)
摘要:Nginx以前对session保持支持不太好,主要采用ip_hash把同一来源的客户(同一C段的IP)固定指向后端的同一台机器,ip_hash有个缺点是不能实现很好的负载均衡;直到nginx的扩展模块nginx-sticky-module的出现,解决了session sticky的问题。基本的原理:... 阅读全文
posted @ 2015-06-14 14:40 翔宇编程 阅读(684) 评论(0) 推荐(0)
摘要:We want to count all to the books in the library.You count up shelf #1,I count up shelf #2.That's a map. The more people we get, the faster it gose.我们... 阅读全文
posted @ 2015-06-10 18:12 翔宇编程 阅读(221) 评论(0) 推荐(0)

51CTO