摘要: 之前有幸被领导安排学习Redis,分析它是否适用于MR批处理系统。这里便是我和同事们分享的内容。 其中的内容多是我从各个不同的博客中学到的,在这次学习机会中将他们做了整理,以下观点多是各个博文中的内容,但是其中也添加了一些我的个人简介。如果有谬误之处,还请指出。 ... 阅读全文
posted @ 2016-01-05 20:42 aicro 阅读(360) 评论(0) 推荐(0) 编辑
摘要: 1. 下载FileZilla2. 在虚拟机上安装SSH,http://linuxconfig.org/how-to-install-start-and-connect-to-ssh-server-on-fedora-linux3. 于虚拟机端启动SSHsystemctl start sshdssh ... 阅读全文
posted @ 2015-05-31 15:50 aicro 阅读(1388) 评论(0) 推荐(0) 编辑
摘要: 安装这个additions的过程,基本上可以参照http://gamblisfx.com/how-to-install-virtualbox-guest-additions-on-fedora-21/拷贝一份过来就是,1. 先更新内核yum update kernel*2. 重启reboot3. 安... 阅读全文
posted @ 2015-02-01 22:13 aicro 阅读(574) 评论(0) 推荐(0) 编辑
摘要: 接着上篇文章继续讲字符集的故事。这一篇文章主要讲MYSQL的各个字符集设置,关于基础理论部分,参考于这里。 1. MYSQL的系统变量 – character_set_server:默认的内部操作字符集 – character_set_client:客户端来源数据使用的字符集 – character_set_connection:连接层字符集 – character_set_... 阅读全文
posted @ 2014-10-08 16:15 aicro 阅读(426) 评论(0) 推荐(0) 编辑
摘要: 一、字符集总结 其实大多数的知识在这篇文章里已经讲得非常清楚了。这里只是讲一下自己的感悟。 1. UTF-8虽然是以UTF(unicode transfermation format)开头的,但是他并不是真正意义上的Unicode。他是在UCS上的再编码。而且,这是一个变长的编码方式。 2. 根据这篇文章的说法,在ISO制定UCS(Universal Character Set)的同时... 阅读全文
posted @ 2014-09-30 16:19 aicro 阅读(1790) 评论(0) 推荐(0) 编辑
摘要: 一、为什么要有这个实验 我们的系统是批处理系统,类似于管道的架构。而各个数据表就是管道的两端,而我们的程序就类似于管道本身。我们所需要做的事情无非就是从A表抽取数据,经过一定过滤、汇总等操作放置到B表。如果出现了错误,那么就从重新跑这一个管道。所以说,我们的系统其实根本就不要什么事务性,无非就是挂了把表给TRUNCATE(或者有条件地DELETE)一下,然后重跑就行了。 这样一来,对于sele... 阅读全文
posted @ 2014-09-26 12:56 aicro 阅读(21497) 评论(2) 推荐(2) 编辑
摘要: 一、我们遇到了什么问题 在标准SQL里面,我们通常会写下如下的SQL insert语句。 INSERT INTO TBL_TEST (id) VALUES(1);很显然,在MYSQL中,这样的方式也是可行的。但是当我们需要批量插入数据的时候,这样的语句却会出现性能问题。例如说,如果有需要插入100000条数据,那么就需要有100000条insert语句,每一句都需要提交到关系引擎那里去解析,... 阅读全文
posted @ 2014-07-17 16:35 aicro 阅读(64679) 评论(3) 推荐(4) 编辑
摘要: 本篇只是作为自学Marven的笔记贴,基本上都是网上的各种资料的汇总,方便自己和需要的人,不用一个个去找浪费时间了。什么是MarvenYou want to start with a project, say a J2ee or Spring MVC and you are lost what is the minimum set of Jars, how should I create the folder structure, Should it be a WAR, EAR, What are the “Best Practices” for a particular kind of pr 阅读全文
posted @ 2014-04-01 15:49 aicro 阅读(706) 评论(1) 推荐(0) 编辑
摘要: 终于完成了! 从第一次想写到现在真的写好大概花了我3个月时间。原来一直读人家的系列文章,总感慨作者的用心良苦和无私奉献,自己在心里总是会觉得有那么些冲动也来写一个。 最开始的麻烦是犹豫该选哪个主题。其实有好几个想仔细读一下的源代码,比如说gtest,陈硕写的网络库muduo,还有那本尘封已久的Linux源码……最后由于工作需要,我还是选了个最“实在”的主题——说实在只是因为这个是工作需要——M... 阅读全文
posted @ 2014-03-30 10:23 aicro 阅读(4906) 评论(0) 推荐(1) 编辑
摘要: 从之前所介绍的SSQLS的介绍中我们可以感受到,SSQLS的精髓应该在sql_create_#这个宏,他所创建出来的这个结构体将会是突破的关键,所以我将会从以下顺序入手。1. sql_create_#先再来重复一下我们需要使用的examples/stock.h中的内容sql_create_6( stock, 1, 6, mysqlpp::sql_char, item, mysqlpp::sql_bigint, num, mysqlpp::sql_double, weight, mysqlpp:... 阅读全文
posted @ 2014-03-30 10:05 aicro 阅读(2544) 评论(0) 推荐(0) 编辑