摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 从“互联网+、移动互联网、AI+”等概念的更迭,大家对数据的认知越来越清晰。数据既是线上场景的产物,反之又作用线上场景的持续优化。“数据将改变互联网”、“数据的量变将带来世界的质变”众说纷纭,但是大数据技术怎样在行业中落地实践并发挥作用成为让人深思 阅读全文
posted @ 2018-11-22 17:10 tianshidan1998 阅读(1116) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 2016年对于网易杭州研究院(以下简称“杭研”)而言是重要的 – 成立十周年之际,杭研正式推出了网易云。“十年•杭研技术秀”系列文章,由杭研研发团队倾情奉献,为您展示杭研那些有用、有趣的技术实践经验,涵盖云计算、大前端、信息安全、运维、QA、大数据 阅读全文
posted @ 2018-11-22 15:20 tianshidan1998 阅读(244) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 数字化转型浪潮之下,采用云计算服务提升业务敏捷性、降低运维成本,成为了传统企业的优选方案。网易云资深解决方案架构师张亮通过某物流企业客户的实际案例,分享了传统业务系统在云上的架构设计如何满足数据高可靠、业务高可用的需求,并总结了传统业务上云的常见问 阅读全文
posted @ 2018-11-22 15:00 tianshidan1998 阅读(545) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 前言 默认读者有kubernetes基础概念的背景知识,因此基础概念例如有状态、pod、Replica Sets、Deployments、statefulsets等不在此文详细阐述。 可以看我之前的一些关于kubernetes的文章: kubern 阅读全文
posted @ 2018-11-22 14:40 tianshidan1998 阅读(1307) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 五、K8s 1.8 新特性——ipvs ipvs与iptables的性能差异 随着服务的数量增长,IPTables 规则则会成倍增长,这样带来的问题是路由延迟带来的服务访问延迟,同时添加或删除一条规则也有较大延迟。不同规模下,kube-proxy添 阅读全文
posted @ 2018-11-22 14:30 tianshidan1998 阅读(400) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、问题 首先,我们思考这样一个问题: 访问k8s集群中的pod, 客户端需要知道pod地址,需要感知pod的状态。那如何获取各个pod的地址?若某一node上的pod故障,客户端如何感知? 二、k8s service 什么是service 是发现 阅读全文
posted @ 2018-11-22 13:20 tianshidan1998 阅读(669) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 虚拟化 是一种资源管理技术,将计算机的各种资源予以抽象、转换后呈现出来, 打破实体结构间的不可切割的障碍,使用户可以比原本更好的方式来应用这些资源。 Hypervisor 一种运行在基础物理服务器和操作系统之间的中间软件层,可允许多个操作系统和应用 阅读全文
posted @ 2018-11-22 12:50 tianshidan1998 阅读(201) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 Docker原理分析 Docker架构 镜像原理 镜像是一个只读的容器模板,含有启动docker容器所需的文件系统结构及内容Docker以镜像和在镜像基础上构建的容器为基础,以容器开发、测试、发布的单元将应用相关的所有组件和环境进行封装,避免了应用 阅读全文
posted @ 2018-11-22 12:40 tianshidan1998 阅读(487) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 项目背景 蜂巢计费系统为网易云计算基础服务(网易蜂巢)提供整体的计费服务,业务范围涵盖完整的产品售卖流程,包含定价、订单、支付、计费、结算、优惠、账单等主体功能,支持十几种不同产品的售卖,产品形态上贯穿了IaaS、PaaS和SaaS类别。同时,计费 阅读全文
posted @ 2018-11-22 12:20 tianshidan1998 阅读(1027) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 2018年7月31日,由杭州市政府、赛迪以及网易主办的“2018中国杭州云创大会”于杭州国际博览中心如期举办,大会以“开放·生态·赋能”为主题,汇聚行业领袖、技术大咖及产业链从业者。随着数字经济的时代到来,企业数字化创新对新一代云计算服务的需求日渐 阅读全文
posted @ 2018-11-22 12:01 tianshidan1998 阅读(516) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 3大数据时代,众人拾柴火焰高 当数据量很小时,很少的几台机器就能解决。慢慢的,当数据量越来越大,最牛的服务器都解决不了问题时,怎么办呢?这时就要聚合多台机器的力量,大家齐心协力一起把这个事搞定,众人拾柴火焰高。 阅读全文
posted @ 2018-11-22 11:30 tianshidan1998 阅读(154) 评论(0) 推荐(0)
摘要: 此文已由作者汤晓静授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 lua 协程与 nginx 事件机制结合 文章前部分用大量篇幅阐述了 lua 和 nginx 的相关知识,包括 nginx 的进程架构,nginx 的事件循环机制,lua 协程,lua 协程如何与 C 实现交 阅读全文
posted @ 2018-11-22 11:21 tianshidan1998 阅读(229) 评论(0) 推荐(0)
摘要: 此文已由作者汤晓静授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 OpenResty 发展起源 OpenResty(也称为 ngx_openresty)是一个全功能的 Web 应用服务器。它打包了标准的 nginx 核心,很多的常用的第三方模块,以及它们的大多数依赖项。 通 阅读全文
posted @ 2018-11-22 11:13 tianshidan1998 阅读(509) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 一、架构的三个维度和六个层面 1.1、三大架构 在互联网时代,要做好一个合格的云架构师,需要熟悉三大架构。 第一个是IT架构,其实就是计算,网络,存储。这是云架构师的基本功,也是最传统的云架构师应该首先掌握的部 阅读全文
posted @ 2018-11-22 11:05 tianshidan1998 阅读(135) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 八、基于OpenStack了解云平台 当有了虚拟机,并且虚拟机能够上网了之后,接下来就是搭建云平台的时候了。 云是基于计算,网络,存储虚拟化技术的,云和虚拟化的主要区别在于,管理员的管理模式不同,用户的使用模式 阅读全文
posted @ 2018-11-22 10:58 tianshidan1998 阅读(157) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 十、基于Hadoop和Spark了解大数据平台 对于数据架构的部分,其实经历了三个过程,分别是Hadoop Map-Reduce 1.0,基于Yarn的Map-Reduce 2.0, 还有Spark。 如下图是 阅读全文
posted @ 2018-11-22 10:47 tianshidan1998 阅读(114) 评论(0) 推荐(0)
摘要: 作者:刘超 一、服务拆分的前提 说到微服务,服务拆分是绕不过去的话题,但是微服务不是说拆就能拆的,有很多的前提条件,需要完成前面几节所论述的部分。 首先要有一个持续集成的平台,使得服务在拆分的过程中,功能的一致性,这种一致性不能通过人的经验来,而需要经过大量的回归测试集,并且持续的拆分,持续的演进, 阅读全文
posted @ 2018-11-22 10:38 tianshidan1998 阅读(341) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 今天跟大家讲讲云计算、大数据和人工智能。为什么讲这三个东西呢?因为这三个东西现在非常火,并且它们之间好像互相有关系:一般谈云计算的时候会提到大数据、谈人工智能的时候会提大数据、谈人工智能的时候会提云计算……感觉 阅读全文
posted @ 2018-11-22 10:30 tianshidan1998 阅读(291) 评论(0) 推荐(0)
摘要: 欢迎访问网易云社区,了解更多网易技术产品运营经验。 本文章根据网易云资深解决方案架构师 王必成在云原生用户大会上的分享整理。 今天我将分享个人对于网络方案的理解,以及网易云在交付 Kubernetes 场景时的一些网络实践。 本文分为两部分: 第一部分:常见容器网络方案; 第二部分:网易云基于 VP 阅读全文
posted @ 2018-11-22 10:11 tianshidan1998 阅读(1339) 评论(0) 推荐(0)
摘要: 此文已由作者刘超授权网易云社区发布。 欢迎访问网易云社区,了解更多网易技术产品运营经验。 在高并发场景下,需要通过缓存来减少数据库的压力,使得大量的访问进来能够命中缓存,只有少量的需要到数据库层。由于缓存基于内存,可支持的并发量远远大于基于硬盘的数据库。所以对于高并发设计,缓存的设计时必不可少的一环 阅读全文
posted @ 2018-11-22 10:01 tianshidan1998 阅读(159) 评论(0) 推荐(0)