thinker1017 - 博客园

2017年11月5日

摘要： 1 Hbase日常运维 1.1 监控Hbase运行状况 1.1.1 操作系统 1.1.1.1 IO IO越大说明文件读写操作越多。当IO突然增加时，有可能：1.compact队列较大，集群正在进行大量压缩操作。 2.正在执行mapreduce作业可以通过CDH前台查看整个集群综合的数据或进入指定机阅读全文

posted @ 2017-11-05 16:24 thinker1017 阅读(943) 评论(0) 推荐(2)

2017年7月4日

大数据江湖之即席查询与分析（下篇）--手把手教你搭建即席查询与分析Demo

摘要：上篇小弟分享了几个“即席查询与分析”的典型案例，引起了不少共鸣，好多小伙伴迫不及待地追问我们：说好的“手把手教你搭建即席查询与分析Demo”啥时候能出？说到就得做到，差啥不能差人品，本篇只分享技术干货，目的只有一个，就是让每一个伙伴都能根据本篇向导搭建出一个“即席查询与分析Demo”。为了让各位伙阅读全文

posted @ 2017-07-04 10:08 thinker1017 阅读(961) 评论(0) 推荐(0)

YDB基本使用详解（转）

摘要：第七章YDB基本使用详解一、如何与YDB对接（交互）目前延云YDB提供如下几种方式 l命令行的方式 lWeb http接口的方式 lJDBC接口的方式通过Java编程接入通过可视化SQL分析统计接入通过报表分析工具接入二、命令行接入进入ya100的安装目录的bin目录 1.直接执行 . 阅读全文

posted @ 2017-07-04 09:58 thinker1017 阅读(6464) 评论(0) 推荐(0)

基于原版Hadoop的YDB部署（转）

摘要： YDB依赖环境准备一、硬件环境硬件如何搭配，能做到比较高的性价比，不存在短板。合理的硬件搭配，对系统的稳定性也很关键。 1.CPU不是核数越高越好，性价比才是关键。经常遇到很多的企业级客户，他们机器配置非常高，CPU有128 VCore，256G内存，但是只挂载了1块8T的SATA硬盘，千兆网阅读全文

posted @ 2017-07-04 09:56 thinker1017 阅读(830) 评论(0) 推荐(0)

基于HDP版本的YDB安装部署（转）

摘要：第三章 YDB依赖环境准备一、硬件环境硬件如何搭配，能做到比较高的性价比，不存在短板。合理的硬件搭配，对系统的稳定性也很关键。 1.CPU不是核数越高越好，性价比才是关键。经常遇到很多的企业级客户，他们机器配置非常高，CPU有128 VCore，256G内存，但是只挂载了1块8T的SATA硬盘阅读全文

posted @ 2017-07-04 09:30 thinker1017 阅读(1005) 评论(0) 推荐(0)

2017年6月27日

SVD在推荐系统中的应用详解以及算法推导

摘要： SVD在推荐系统中的应用详解以及算法推导 SVD在推荐系统中的应用详解以及算法推导出处http://blog.csdn.net/zhongkejingwang/article/details/43083603 前面文章SVD原理及推导已经把SVD的过程讲的很清楚了，本文介绍如何将SVD应用于推荐系阅读全文

posted @ 2017-06-27 10:47 thinker1017 阅读(616) 评论(0) 推荐(0)

2017年6月8日

数十种TensorFlow实现案例汇集：代码+笔记（转）

摘要：转：https://www.jiqizhixin.com/articles/30dc6dd9-39cd-406b-9f9e-041f5cbf1d14 这是使用 TensorFlow 实现流行的机器学习算法的教程汇集。本汇集的目标是让读者可以轻松通过案例深入 TensorFlow。这些案例适合那些想阅读全文

posted @ 2017-06-08 15:33 thinker1017 阅读(586) 评论(0) 推荐(0)

talent-aio源码阅读小记（二）

摘要：我们上一篇提到了talent-aio的四类Task：DecodeRunnable、HandlerRunnable、SendRunnable、CloseRunnable，并且分析了这些task的基类AbstractQueueRunnable。在这篇文章中，我们就来分析一下这几个task是如何相互协作来阅读全文

posted @ 2017-06-08 08:42 thinker1017 阅读(541) 评论(0) 推荐(0)

talent-aio源码阅读小记（一）

摘要：近来在oschina上看到一个很火的java 即时通讯项目talent-aio，恰巧想了解一下这方面的东西，就阅读了一下项目的源码，这里对自己阅读源码后的一些心得体会做一下备忘，也希望能够对其他项目中需要用到即时通讯功能的人有所帮助。 1 talent-aio是什么 talent-aio是基于jav 阅读全文

posted @ 2017-06-08 08:40 thinker1017 阅读(566) 评论(0) 推荐(0)

scrapy进行分布式爬虫

摘要：今天，参照崔庆才老师的爬虫实战课程，实践了一下分布式爬虫，并没有之前想象的那么神秘，其实非常的简单，相信你看过这篇文章后，不出一小时，便可以动手完成一个分布式爬虫！ 1、分布式爬虫原理首先我们来看一下scrapy的单机架构：可以看到，scrapy单机模式，通过一个scrapy引擎通过一个调度器，阅读全文

posted @ 2017-06-08 08:33 thinker1017 阅读(6235) 评论(1) 推荐(0)

公告