Fork me on GitHub
摘要: 公告 五月初  "hellogithub.com" 网站做了优化和试错。因为我个人能力原因,导致这段时间网站出现了间断性不能访问,现在问题已经修复。多谢大家的支持、理解和反馈。 网站新增了“星图”的功能 ,还在测试阶段欢迎反馈问题。 总而言之,今年已过半 HelloGitHub 还在路上,希望阅读全文
posted @ 2018-05-28 08:16 削微寒 阅读(1223) 评论(9) 编辑
摘要: 公告 今天是《HelloGitHub》月刊 两周年。当时发布第一期的时候,根本没有想到可以走到现在。 这两年,HelloGitHub 项目有过辉煌的时刻:连续 3 天 GitHub 趋势首页、Python 分类名列前茅;一天飙升 300 stars,我的整个首页都被 star 信息填满,往下滑了好几阅读全文
posted @ 2018-03-29 11:04 削微寒 阅读(2249) 评论(29) 编辑
摘要: 简介 随着 HelloGitHub 月刊持续更新了一年多,内容变的越来越多。因为内容数据没有结构化,如果还是使用之前的编辑文本的方式编辑月刊内容,会对后面的继续发刊和维护带来了很多问题和多余的工作,例如:查看、查重、分类、排序、修改、同步内容等 最初 是使用本地数据库的方式进行管理数据,通过脚本生成阅读全文
posted @ 2017-07-14 17:16 削微寒 阅读(2254) 评论(10) 编辑
摘要: 什么是真正的程序员 这篇文章的原文来自: "A Little Printf Story" 作者仿照《小王子》中的情节,通过小printf遇见的不同类型的程序员,最后悟出什么才是真正的程序员!第一次翻译有很多不妥,欢迎留言指正。 文章略长,但是耐心读完,你肯定会受益良多! 第一章 (推荐看完整篇文章,阅读全文
posted @ 2016-02-26 15:12 削微寒 阅读(14484) 评论(42) 编辑
摘要: 背景: 在分布式中,最难解决的一个问题就是多个节点间数据同步问题。为了解决这样的问题,涌现出了各种奇思妙想。只有在解决了如何进行信息同步的基础之上才衍生出形形色色的应用。这里开始介绍几种分布式通信协议。 简单即有效——totem协议: totem协议也许你还比较陌生,但是corosync就是tote阅读全文
posted @ 2018-07-18 16:41 削微寒 阅读(7) 评论(0) 编辑
摘要: 公告 网站新增了简单的搜索功能,可以通过项目名称或地址搜索、查看项目。欢迎star和推荐项目,我们一只在路上,希望志同道合者加入进来。 现招募专栏负责人: C Java 《HelloGitHub》第 27 期 兴趣是最好的老师, HelloGitHub 就是帮你找到兴趣! 简介 分享 GitHub 阅读全文
posted @ 2018-06-28 09:49 削微寒 阅读(732) 评论(9) 编辑
摘要: "如何用形象的比喻描述大数据的技术生态?Hadoop、Hive、Spark 之间是什么关系?" 大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。你可以用阅读全文
posted @ 2018-06-23 10:07 削微寒 阅读(48) 评论(0) 编辑
摘要: 一、User: xx is not allowed to impersonate xxx' 解决办法:修改 文件,加入下面的内容后重启 hadoop 。 Tips: 注意是 不是 二、ACCEPTED: waiting for AM container to be allocated, launch阅读全文
posted @ 2018-06-23 10:05 削微寒 阅读(63) 评论(0) 编辑
摘要: 一、介绍 Presto是一个开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。 Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。 推荐阅读 "Presto实现原理和美团的使用实践" 二、安装 2.1 安装步骤 1.阅读全文
posted @ 2018-06-23 10:04 削微寒 阅读(16) 评论(0) 编辑
摘要: Hive 导入 parquet 数据步骤如下: 1. 查看 parquet 文件的格式 2. 构造建表语句 3. 倒入数据 一、查看 parquet 内容和结构 下载地址 "社区工具" "GitHub 地址" 命令 1. 查看结构: 2. 查看内容: parquet 和 hive 的 field 类阅读全文
posted @ 2018-06-23 10:01 削微寒 阅读(304) 评论(0) 编辑
摘要: 公告 五月初  "hellogithub.com" 网站做了优化和试错。因为我个人能力原因,导致这段时间网站出现了间断性不能访问,现在问题已经修复。多谢大家的支持、理解和反馈。 网站新增了“星图”的功能 ,还在测试阶段欢迎反馈问题。 总而言之,今年已过半 HelloGitHub 还在路上,希望阅读全文
posted @ 2018-05-28 08:16 削微寒 阅读(1223) 评论(9) 编辑
摘要: 一、协议的一致性 uWSGI 是在 nginx 后面,所以 nginx 转发请求时的协议要和 uWSGI 监听的协议一致。否则就会出现问题,因为是三者之间的通信,排查起来需要想清楚请求传递的次序: Nginx uWSGI app 1.1 uWSGI 异常信息 如果按照下面的配置就会出现上述的异常: 阅读全文
posted @ 2018-05-19 12:56 削微寒 阅读(219) 评论(0) 编辑
摘要: 《HelloGitHub》第 25 期 兴趣是最好的老师, HelloGitHub 就是帮你找到兴趣! 简介 分享 GitHub 上有趣、入门级的开源项目。 这是一个面向 编程新手 、 热爱编程 、 对开源社区感兴趣 人群的月刊,月刊的内容包括: 各种编程语言的项目 、 让生活变得更美好的工具 、 阅读全文
posted @ 2018-05-03 07:36 削微寒 阅读(1247) 评论(3) 编辑
摘要: 公告 今天是《HelloGitHub》月刊 两周年。当时发布第一期的时候,根本没有想到可以走到现在。 这两年,HelloGitHub 项目有过辉煌的时刻:连续 3 天 GitHub 趋势首页、Python 分类名列前茅;一天飙升 300 stars,我的整个首页都被 star 信息填满,往下滑了好几阅读全文
posted @ 2018-03-29 11:04 削微寒 阅读(2249) 评论(29) 编辑