随笔分类 -  大数据

Elasticsearch与Solr优缺点比较
摘要：Elasticsearch简介 Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。 它可以用于全文搜索，结构化搜索以及分析，也可以将这三者进行组合。 Elasticsearch是一个建立在全文搜索引擎 Apache Lucene™ 基础上的搜索 阅读全文
posted @ 2019-07-21 11:01 天下尽好 阅读(6732) 评论(0) 推荐(0)
我所经历的大数据平台发展史（四）：互联网时代 • 下篇
摘要：编者按：本文是松子（李博源）的大数据平台发展史系列文章的第四篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统行业与非传统行业。是对数据平台发展的一个回忆，对非互联网、互联网，从数据平台的用户角度、数据架构演进、模型等进行了阐述。 在互联网时代被弱化的数据模型 谈起数据模型就不 阅读全文
posted @ 2019-07-12 18:00 天下尽好 阅读(650) 评论(0) 推荐(0)
我所经历的大数据平台发展史（二）：非互联网时代 • 下篇
摘要：编者按：本文是松子（李博源）的大数据平台发展史系列文章的第二篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆，对非互联网、互联网，从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言，”数据模型“ 这个词只要是跟数据沾边就会 阅读全文
posted @ 2019-07-12 17:59 天下尽好 阅读(367) 评论(0) 推荐(0)
我所经历的大数据平台发展史（三）：互联网时代 • 上篇
摘要：编者按：本文是松子（李博源）的大数据平台发展史系列文章的第二篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆，对非互联网、互联网，从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言，本篇幅将进入大家熟知的互联网时代，数据平 阅读全文
posted @ 2019-07-12 17:59 天下尽好 阅读(388) 评论(0) 推荐(0)
我所经历的大数据平台发展史（一）：非互联网时代 • 上篇
摘要：编者按：本文是松子（李博源）的大数据平台发展史系列文章的第一篇（共四篇），本系列以独特的视角，比较了非互联网和互联网两个时代以及传统与非传统两个行业。是对数据平台发展的一个回忆，对非互联网、互联网，从数据平台的用户角度、数据架构演进、模型等进行了阐述。 前言，这个数据平台发展史仅是自己经历过由传统数 阅读全文
posted @ 2019-07-12 17:58 天下尽好 阅读(607) 评论(0) 推荐(0)
一份数据工程师必备的学习资源，干货满满（附链接）
摘要：本文首先详细介绍了数据工程的职责、与数据科学家之间的差别以及其不同的工作角色，然后重点列出了很多与核心技能相关的的优秀学习资源，最后介绍行业内认可度较高的3种数据工程认证。 简介 在建立模型之前，在数据经过清洗用于探索分析之前，甚至在数据科学家工作开始之前，数据工程师就已经闪亮登场了。每一个数据驱动 阅读全文
posted @ 2019-07-08 16:38 天下尽好 阅读(1362) 评论(0) 推荐(0)
FusionInsight，一个融合的大数据平台
摘要：随着物联网技术和应用的普及，以运营商、互联网以及实体经济行业为代表的企业产生了越来越多的数据，大数据的发展越来越蓬勃。 从2007年开始，大数据应用成为很多企业的需求，2012年兴起并产生了大数据平台，使用者主要是程序员；2013年到2017年间，数据逐渐增多，大数据平台变成了融合大数据平台，使用者 阅读全文
posted @ 2019-07-08 12:19 天下尽好 阅读(1392) 评论(0) 推荐(0)
关于大数据，你应该知道的75个专业术语
摘要：近日，Ramesh Dontha 在 DataConomy 上连发两篇文章，扼要而全面地介绍了关于大数据的 75 个核心术语，这不仅是大数据初学者的很好的入门资料，对于高阶从业人员也可以起到查缺补漏的作用。本文分为上篇（25 个术语）和下篇（50 个术语）。机器之心对文章进行了编译，原文链接请见文末 阅读全文
posted @ 2019-07-01 16:04 天下尽好 阅读(1915) 评论(0) 推荐(0)
hbase常识及habse适合什么场景
摘要：当我们对于数据结构字段不够确定或杂乱无章很难按一个概念去进行抽取的数据适合用使用什么数据库？答案是什么，如果我们使用的传统数据库，肯定留有多余的字段，10个不行，20个，但是这个严重影响了质量。并且如果面对大数据库，pt级别的数据，这种浪费更是严重的，那么我们该使用是什么数据库？hbase数个不错的 阅读全文
posted @ 2017-11-22 11:05 天下尽好 阅读(10014) 评论(0) 推荐(0)
Hbase与传统数据库的区别
摘要：在说HBase之前，我想再唠叨几句。做互联网应用的哥们儿应该都清楚，互联网应用这东西，你没办法预测你的系统什么时候会被多少人访问，你面临的用户到底有多少，说不定今天你的用户还少，明天系统用户就变多了，结果您的系统应付不过来了了，不干了，这岂不是咱哥几个的悲哀，说时髦点就叫“杯具啊”。 其实说白了，这 阅读全文
posted @ 2017-11-22 10:23 天下尽好 阅读(14896) 评论(1) 推荐(1)