摘要: 企业构建大数据体系的六层级发表于 2014-06-26 07:15 来源:BLUES注:在迅雷公司内部做了分享《大数据成为生产力》 ,150页的PPT,内容太多,讲的速度有些快。删减掉一些敏感信息,汇总主要观点浓缩成为此文,或许对大家构建企业的大数据运营体系有些参考作用。本文将企业大数据体系的构建分... 阅读全文
posted @ 2014-07-15 13:39 飘荡小黄鸭 阅读(444) 评论(0) 推荐(0) 编辑
摘要: file(内存)----输入流---->【程序】----输出流---->file(内存)当我们读写文本文件的时候,采用Reader是非常方便的,比如FileReader,InputStreamReader和BufferedReader。其中最重要的类是InputStreamReader, 它是字节转换为字符的桥梁。你可以在构造器重指定编码的方式,如果不指定的话将采用底层操作系统的默认编码方式,例如GBK等。使用FileReader读取文件:[java] view plaincopyFileReaderfr=newFileReader("ming.txt");in 阅读全文
posted @ 2014-03-11 11:56 飘荡小黄鸭 阅读(441) 评论(0) 推荐(0) 编辑
摘要: 测试机器的硬件信息:查看CPU信息(型号)# cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq -c 8 Intel(R) Xeon(R) CPU E5410 @ 2.33GHz(看到有8个逻辑CPU, 也知道了CPU型号)# cat /proc/cpuinfo | grep physical | uniq -c 4 physical id : 0 4 physical id : 1(说明实际上是两颗4核的CPU)# getconf LONG_BIT 32(说明当前CPU运行在32bit模式下, 但不代表CPU不支持64bit)# cat / 阅读全文
posted @ 2014-02-26 22:27 飘荡小黄鸭 阅读(649) 评论(0) 推荐(0) 编辑
摘要: CentOS 6.4下编译安装MySQL 5.6.14概述:CentOS 6.4下通过yum安装的MySQL是5.1版的,比较老,所以就想通过源代码安装高版本的5.6.14。正文:一:卸载旧版本使用下面的命令检查是否安装有MySQL Serverrpm -qa | grep mysql有的话通过下面的命令来卸载掉rpm -e mysql //普通删除模式rpm -e --nodeps mysql // 强力删除模式,如果使用上面命令删除时,提示有依赖的其它文件,则用该命令可以对其进行强力删除二:安装MySQL安装编译代码需要的包yum -y install make gcc-c++ ... 阅读全文
posted @ 2014-02-26 12:00 飘荡小黄鸭 阅读(172) 评论(0) 推荐(0) 编辑
摘要: 一、安装Jmeter1、下载Jmeter下载地址:http://jmeter.apache.org/download_jmeter.cgi目前最新版为2.9,其余文件如源代码等也可从如下官网下载:http://jmeter.apache.org/download_jmeter.cgi2、安装Jmeter之前安装Jmeter之前需要先配置Java环境,我们下载的是jmeter2.9,所以java版本最好是选用java6以后的版本。安装JDk1.6的步骤如下:点击下载的JDK文件-dk-6u18-windows-i586.exe,点击下一步直至安装完成,然后开始配置环境:点击我的电脑----属性- 阅读全文
posted @ 2014-02-21 17:10 飘荡小黄鸭 阅读(370) 评论(0) 推荐(0) 编辑
摘要: 1背景11.1MVCC:Snapshot Read vs Current Read21.2Cluster Index:聚簇索引31.32PL:Two-Phase Locking31.4Isolation Level42一条简单SQL的加锁实现分析52.1组合一:id主键+RC62.2组合二:id唯一索引+RC62.3组合三:id非唯一索引+RC72.4组合四:id无索引+RC82.5组合五:id主键+RR92.6组合六:id唯一索引+RR92.7组合七:id非唯一索引+RR92.8组合八:id无索引+RR112.9组合九:Serializable123一条复杂的SQL124死锁原理与分析145 阅读全文
posted @ 2014-02-17 18:01 飘荡小黄鸭 阅读(260) 评论(0) 推荐(0) 编辑
摘要: Java Ant build.xml详解FROM:http://www.cnblogs.com/wufengxyz/archive/2011/11/24/2261797.html1.什么是antant是构建工具2.什么是构建 概念到处可查到,形象来说,你要把代码从某个地方拿来,编译,再拷贝到某个地方去等等操作,当然不仅与此,但是主要用来干这个3.ant的好处 跨平台 --因为ant是使用java实现的,所以它跨平台 使用简单--与ant的兄弟make比起来 语法清晰--同样是和make相比 功能强大--ant能做的事情很多,可能你用了很久,你仍然不知道它能有多少功能。当你自己开发一些an... 阅读全文
posted @ 2014-02-13 16:14 飘荡小黄鸭 阅读(244) 评论(0) 推荐(0) 编辑
摘要: HDFS API详解2012-09-06 13:59:13|分类:hadoop|标签:hdfsapi|举报|字号订阅Hadoop中关于文件操作类基本上全部是在"org.apache.hadoop.fs"包中,这些API能够支持的操作包含:打开文件,读写文件,删除文件等。Hadoop类库中最终面向用户提供的接口类是FileSystem,该类是个抽象类,只能通过来类的get方法得到具体类。get方法存在几个重载版本,常用的是这个:static FileSystem get(Configuration conf); 该类封装了几乎所有的文件操作,例如mkdir,delete等。综 阅读全文
posted @ 2014-02-13 11:32 飘荡小黄鸭 阅读(326) 评论(0) 推荐(0) 编辑
摘要: 一 磁盘物理结构(1) 盘片:硬盘的盘体由多个盘片叠在一起构成。在硬盘出厂时,由硬盘生产商完成了低级格式化(物理格式化),作用是将空白的盘片(Platter)划分为一个个同圆心、不同半径的磁道(Track),还将磁道划分为若干个扇区(Sector),每个扇区可存储128×2的N次方(N=0.1.2.3)字节信息,默认每个扇区的大小为512字节。通常使用者无需再进行低级格式化操作。(2) 磁头:每张盘片的正反两面各有一个磁头。(3) 主轴:所有盘片都由主轴电机带动旋转。(4) 控制集成电路板:复杂!上面还有ROM(内有软件系统)、Cache等。二 磁盘如何完成单次IO操作(1) 寻道当 阅读全文
posted @ 2014-02-12 10:12 飘荡小黄鸭 阅读(405) 评论(0) 推荐(0) 编辑
摘要: Linux简介及Ubuntu安装Linux,免费开源,多用户多任务系统。基于Linux有多个版本的衍生。RedHat、Ubuntu、Debian安装VMware或VirtualBox虚拟机。具体安装步骤,找百度。再安装Ubuntu。具体安装步骤,找百度。安装完后,可以看到Linux系统的目录结构,见链接http://www.cnblogs.com/laov/p/3409875.html常用指令ls 显示文件或目录 -l 列出文件详细信息l(list) -a 列出当前目录下所有文件及目录,包括隐藏的a(all)mkdir 创建目录 -p 创建目... 阅读全文
posted @ 2014-02-09 17:46 飘荡小黄鸭 阅读(221) 评论(0) 推荐(0) 编辑