[置顶] Namenode HA原理详解(脑裂)

摘要: 社区hadoop2.2.0 release版本开始支持NameNode的HA,本文将详细描述NameNode HA内部的设计与实现。 为什么要Namenode HA? 1. NameNode High Availability即高可用。 2. NameNode 很重要,挂掉会导致存储停止服务,无法进 阅读全文

posted @ 2018-09-02 01:36 bigdata_devops 阅读(886) 评论(0) 推荐(0) 编辑

[置顶] 离线部署 Cloudera Manager 5 和 CDH 5.12.1 及使用 CDH 部署 Hadoop 集群服务

摘要: Cloudera Manager Cloudera Manager 分为两个部分:CDH和CM。 CDH是Cloudera Distribution Hadoop的简称,顾名思义,就是cloudera公司发布的Hadoop版本,封装了Apache Hadoop,提供Hadoop所有的服务,包括HDF 阅读全文

posted @ 2018-08-09 21:40 bigdata_devops 阅读(1087) 评论(0) 推荐(0) 编辑

[置顶] 不吹不擂,Python编程【315+道题】

摘要: 写在前面 近日恰逢学生毕业季,课程后期大家“期待+苦逼”的时刻莫过于每天早上内容回顾和面试题问答部分【临近毕业每天课前用40-60分钟对之前内容回顾、提问和补充,专挑班里不爱说话就的同学回答】。 期待的是可以检验自己学习的成功;苦逼的是怎么又有东西没记住,但我们依然每天坚持一遍、一遍又一遍指导记住为 阅读全文

posted @ 2018-05-30 10:24 bigdata_devops 阅读(1362) 评论(0) 推荐(2) 编辑

[置顶] 徐小平:合伙人的最高境界——士为自己者死

该文被密码保护。 阅读全文

posted @ 2018-03-29 00:00 bigdata_devops 阅读(6) 评论(0) 推荐(0) 编辑

[置顶] 一张图告诉你为何必须学Python?

摘要: 互联网行业的薪资高、发展前景好,已经是人尽皆知的事了。越来越多的人对编程有了兴趣,想通过加入大公司实现人生逆袭,我们身边也涌现出了一些从零学习、变身大神的励志故事。 但更多的人还是选择观望:有人觉得编程太难了,肯定学不会;有的想学编程,但不知道怎么学,甚至连学哪门语言都拿不准。 而一些早早付出行动, 阅读全文

posted @ 2018-02-25 17:53 bigdata_devops 阅读(1318) 评论(0) 推荐(0) 编辑

[置顶] 初创公司股权分配

该文被密码保护。 阅读全文

posted @ 2018-02-25 17:46 bigdata_devops 阅读(25) 评论(0) 推荐(0) 编辑

[置顶] 我想成为更高level的人

摘要: ... 阅读全文

posted @ 2018-02-10 22:11 bigdata_devops 阅读(1209) 评论(2) 推荐(3) 编辑

[置顶] 远程访问Centos6.5上的mysql或者mariadb(navicat)

摘要: 问题背景 1 环境 物理主机操作系统Centos6.5 虚拟主机KVM:centos6.5 64位min版本(虚拟机安装有台) 网络:桥接模式 2 问题 yum安装mariadb10/mysql6.5后,本地只有root用户能访问,新增的其他用户本地,远程都不能访问。 安装mariadb参考:Cen 阅读全文

posted @ 2017-08-28 17:30 bigdata_devops 阅读(230) 评论(0) 推荐(0) 编辑

2020年7月4日

VPS系统后台性能优化实战

摘要: 2019年开始,新东方APP团队启动了长达半年以上的稳定性建设工作,为什么稳定性如此重要?因为随着每年30%以上的高速增长,现有的后端服务完全扛不住日益增多的用户带来的高并发,高可用场景。所以优化工作势在必行。 如果你是一名java程序员的话,相信你也会很清楚,有时候,在研发功能的时候,仅仅是贴着产 阅读全文

posted @ 2020-07-04 01:39 bigdata_devops 阅读(299) 评论(0) 推荐(0) 编辑

今天的演讲题目是“新东方APP技术架构演进, C端技术经验分享”

摘要: 作者:张建鑫, 曾任IBM高级软件架构师, 滴滴高级技术专家, 现任新东方集团高级技术总监 古代东西方的思想家都产生过一个终极的追问,世界的本元到底是什么? 老子说,道生一,一生二,二生三,三生万物,天道有常不以尧存不为桀亡。孔子说朝闻道,夕死可矣,孔子把对道的研究从,对人与自然关系的天道,转移到了 阅读全文

posted @ 2020-07-04 01:30 bigdata_devops 阅读(616) 评论(0) 推荐(0) 编辑

2020年5月20日

大数据SRE-生态圈组件介绍

摘要: 从故事开始:一个电商平台的用户行为分析需求最近,就职于一家电商公司的小李遇到了一些麻烦事,因为领导突然给他布置了一个任务,要把他们电商平台里所有的用户在 PC 端和 App 上的浏览、点击、购买等行为日志都存放起来集中分析,并形成报表,以供老板每天查看。 最初,小李觉得这个任务比较简单,他的基本思路 阅读全文

posted @ 2020-05-20 01:23 bigdata_devops 阅读(1118) 评论(1) 推荐(1) 编辑

2018年8月10日

grafana+influxdb安装

摘要: 登录http://192.168.1.114:3000/login 2.修改完密码之后,进入主界面 阅读全文

posted @ 2018-08-10 17:24 bigdata_devops 阅读(258) 评论(0) 推荐(0) 编辑

导航