摘要：
mark： 整体架构及使用的技术中规中矩，使用也是比较常的一些技术栈 关注： 参考： 阅读全文
posted @ 2017-05-27 08:54 天戈朱 阅读(870) 评论(0) 推荐(0) 编辑
摘要：
mark： 新方向：原来我们讲的 Iaas/Paas/Saas 三层平台，未来运营商的大数据平台将向更深层次方向演进，如：Paas ( T-Paas、D-Paas) mark架构中的新技术：kudu、Ceph、OGG(Oralce GoldenGate)、RHadoop、TiDB mark自主研发X 阅读全文
posted @ 2017-05-27 08:53 天戈朱 阅读(3092) 评论(0) 推荐(0) 编辑
摘要：
Kibana 和 Grafana 是两个开源工具，能可视化和推断大量日志数据内的趋势。Kibana 是一个分析和可视化平台，它可以让你浏览、可视化存储在Elasticsearch集群上排名靠前的日志数据，并构建仪表盘。你可以执行深入的数据分析并以多种图表、表格和地图方式可视化这些数据。Grafana 阅读全文
posted @ 2017-05-17 21:01 天戈朱 阅读(5827) 评论(2) 推荐(0) 编辑
摘要：
这个包让你可以更快地完成数据集的数据处理工作。放弃选取行或列子集的传统方法，用这个包进行数据处理。用最少的代码，你可以做最多的事。相比使用data.frame，data.table可以帮助你减少运算时间。一个数据表格包含三部分，即DT[i, j, by]。你可以理解为我们告诉R用i来选出行的子集，并 阅读全文
posted @ 2017-04-28 08:27 天戈朱 阅读(320) 评论(0) 推荐(0) 编辑
摘要：
tidy（整洁），Tidyr包是由Hadely Wickham创建，这个包提高了整理原始数据的效率，tidyr包的4个常用的函数及其用途如下： gather()——它把多列放在一起，然后转化为key:value对。这个函数会把宽格式的数据转化为长格式。它是reshape包中melt函数的一个替代 s 阅读全文
posted @ 2017-04-28 08:27 天戈朱 阅读(657) 评论(0) 推荐(0) 编辑
摘要：
sqldf程序包是R语言中实用的数据管理辅助工具，但最新版本的包在处理中文时出现乱码，待解决 Usage: sqldf(x, stringsAsFactors = FALSE, row.names = FALSE...) row.names: 为True时，行名重命名不重新命名 需安装sqldf 包 阅读全文
posted @ 2017-04-27 08:47 天戈朱 阅读(455) 评论(0) 推荐(0) 编辑
摘要：
dplyr包是Hadley Wickham的新作，主要用于数据清洗和整理，该包专注dataframe数据格式，从而大幅提高了数据处理速度，并且提供了与其它数据库的接口，本节学习dplyr包函数基本用法。dplyr()可使用%>%（链式操作），其功能是用于实现将一个函数的输出传递给下一个函数的第一个参 阅读全文
posted @ 2017-04-27 08:47 天戈朱 阅读(497) 评论(0) 推荐(0) 编辑
摘要：
write.table() 数据导入导出最常用的方式是使用read.table()函数和write.table()处理CSV文件的导入导出，read.table()和write.table()可以处理包含行、列标签的数据框 Usage: write.table(x, file = "", appen 阅读全文
posted @ 2017-04-27 08:46 天戈朱 阅读(516) 评论(0) 推荐(0) 编辑