05 2018 档案
摘要：本文来自 网易云社区 。 为大家分享一篇网易教育产品部韩坤芳关于金字塔原理的文章。希望一起交流探讨，共同进步提升。 工作的时候，特别是技术同学，我们通常会有一种感觉，“表达” 比 “做” 难。有时候明明做得挺好的一件事情，表达出来却不是那么回事情，特别是当转正、晋升述职的时候，都不知道怎么来组织自己
阅读全文
摘要：本文来自 网易云社区 。 一、是什么驱动短视频行业的高速发展？ 在17年6月之前，江湖还没有快手的传说，但是一夜之间，快手宛如一匹黑马进入公众的视野。当时，快手以累计3亿的用户，数千万的日活领跑短视频行业。同年5月，头条宣布火山小视频10亿元的短视频内容创作者，以期蚕食快手的市场份额，此时我们已经可
阅读全文
摘要：本文由 网易云 发布。 最新优惠来袭！5月30日-6月15日网易云易盾验证码产品全线95折！可点击这里查看详情。 促销期间首次提交订单的用户，只要联系客服报出优惠码“YDM08”，即可享受优惠价！ 请注意：本次活动只面向首次提交订单的新用户，续费充值用户无折扣。 促销套餐介绍： 如何联系客服： 可以
阅读全文
摘要：本文来自 网易云社区 。 H5一般页面不会很多，看似简单，实际上会有很多细节需要注意，我自己在做过了几个H5之后，发现了一些常犯的问题，做了小结，希望给新开始做H5的产品相关的同学提供一些帮助。 首先说说一个常容易被忽略但是又很关键的问题： H5虽简单，但活动方案不能糙，避免两三句话就讲完的需求。
阅读全文
摘要：本文来自 网易云社区 。 问题描述 Android App中的页面元素，都是由一个个Box(可以理解成一个个自定义View组件和Widget同级）组成，这些Box可以在不同的页面、不同的模块达到复用的效果。但是，现在遇到了一个对于开发复用棘手的问题， A页面的组件间距和B页面的组件间距可能不同。 A
阅读全文
摘要：本文由 网易云 发布。 5月19日，由网易棋牌联合网易云以及棋牌百晓生主办的网易棋牌游戏大咖会在大家的热情参与和讨论下圆满结束。 此次活动邀请了网易四川棋牌游戏运营总监何山伟、微智娱CEO 张章飞、网易云首席安全架构师沈明星就大家关心的棋牌游戏开发及运营问题进行了分享。 张章飞：棋牌游戏在人工智能上
阅读全文
摘要：本文由 网易云 发布。 5月19日，LiveVideoStack携手网易云易盾，共同打造了“娱乐多媒体开发应用实践”专题，帮助开发者和泛娱乐平台运营人员，提升技术能力，突破难点，拓展思路与视野。 在专题论坛中，网易云易盾CTO朱浩齐分享了《AI赋能的内容安全技术实践》主题内容，从策略、技术、产品三个
阅读全文
摘要：本文由 网易云 发布。 网易杭州研究院（以下简称“杭研”） 成立十周年之际，杭研正式推出了网易云。“十年•杭研技术秀”系列文章，由杭研研发团队倾情奉献，为您展示杭研那些有用、有趣的技术实践经验，涵盖云计算、大前端、信息安全、运维、QA、大数据、人工智能等领域，涉及前沿的分布式、容器、深度学习等技术。
阅读全文
摘要：本文由 网易云 发布。 数字化转型浪潮之下，采用云计算服务提升业务敏捷性、降低运维成本，成为了传统企业的优选方案。网易云资深解决方案架构师张亮通过某物流企业客户的实际案例，分享了传统业务系统在云上的架构设计如何满足数据高可靠、业务高可用的需求，并总结了传统业务上云的常见问题和解决方案。 物流企业业务
阅读全文
摘要：本文由 网易云 发布。 近日，盘古实验室对外披露了ZipperDown漏洞，该漏洞是盘古团队针对不同客户的iOS应用安全审计的过程中发现的，大约有10％的iOS应用会受到此漏洞的影响。 利用此漏洞可以做很多事情，例如实现目录遍历攻击和App Container目录中任意文件覆盖风险……影响究竟有多大
阅读全文
摘要：本文由 网易云 发布。 作者：Martin Banks 我们应该期待与网络犯罪分子进行持续的斗争，因为恶意软件会变得聪明，而我们的安全防护技能也会不断提高。 大多数人都知道物联网，它需要监视和控制成千上万的单个传感器和设备，以构成一个完整的网络。大多数人也会听说勒索软件，无论是作为企业中的个人或IT
阅读全文
摘要：本文由 网易云 发布。 用户原创内容是电商和社区的生命线，但它在非法分子手中也会变成一个强大的作案工具。内容审查人员必须迅速响应，时刻严防侮辱性内容的传播。如果不这样做的话，这些内容就可能会对公司的品牌和影响力造成非常严重的损害。 内容安全架构师Kevin Lee和Jeff Sakasegawa在这
阅读全文
摘要：本文由 网易云 发布。 易盾业务风控周报每周呈报值得关注的安全技术和事件，包括但不限于内容安全、移动安全、业务安全和网络安全，帮助企业提高警惕，规避这些似小实大、影响业务健康发展的安全风险。 1．央行：严禁未经授权认可的APP接入征信系统 随着个人征信统一市场的建立，征信信息安全纳上日程。央行在近期
阅读全文
摘要：本文由 网易云 发布。 Unity 2018开发者大会如期而至。 每年的Unity大会都致力呈现以新锐技术与社区精神为核心的全新Unity生态圈，传播Unity最前沿的技术功能，帮助各类创意人才使用Unity进行高效的内容创作，充分挖掘Unity潜力为各行业带来颠覆性的改变。今年同样如此，在Unit
阅读全文
摘要：互联网、移动互联网、云计算、大数据、人工智能、物联网、区块链等技术已经在人类经济生活中扮演越来越重要的角色，技术给人类带来各种便利的同时，很多企业也饱受“硬币”另一面的伤害，并且形势越来越严峻。 拿信息泄露举例，2016年全年泄露或被盗的数据量大约是19亿条，而2017年，雅虎在提交给美国金融监管机
阅读全文
摘要：本文由 网易云 发布。 作者：郭忆 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 故障恢复 MySQL基于Check point的机制，周期性的建立redo log与数据页的一致点。一旦数据库重启，从记录的Check point开始，根据redo log，对相应的数据页进行更新，对于已经提交
阅读全文
摘要：本文由 网易云 发布。 作者：郭忆 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 在2017年5月芝加哥举办的世界顶级数据库会议SIGMOD/PODS上，作为全球最大的公有云服务提供商，Amazon首次系统的总结了新一代云端关系数据库Aurora的设计实现。Aurora是Amazon在201
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 HFile是HBase存储数据的文件组织形式，参考BigTable的SSTable和Hadoop的TFile实现。从HBase开始到现在，HFile经历了三个版本，其中V2在0.92引入，V3在0.98引入。
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 众所周知，HBase默认适用于写多读少的应用，正是依赖于它相当出色的写入性能：一个100台RS的集群可以轻松地支撑每天10T 的写入量。当然，为了支持更高吞吐量的写入，HBase还在不断地进行优化和修正，这篇
阅读全文
摘要：本文由 网易云 发布。 作者： 范欣欣 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 01 HFile索引结构解析 HFile中索引结构根据索引层级的不同分为两种：single-level和mutil-level，前者表示单层索引，后者表示多级索引，一般为两级或三级。HFile V1版本中只
阅读全文
摘要：本文由 网易云 发布。 作者：冯宇 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 本文是Impala源码笔记的第一篇，本文主要根据源代码学习一下statestored模块的实现，众所周知，Impala包含三个模块，分别是impalad 、catalogd 和statestored， 其中st
阅读全文
摘要：本文由 网易云 发布。 作者：冯宇 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 背景 最近开始使用了新版本的Kylin，在此之前对于新版本的了解只是代码实现和一些简单的新功能测试，但是并没有导入实际场景的数据做分析和查询，线上Hadoop稳定之后，逐渐得将一些老需求往新的环境迁移，基于以前
阅读全文
摘要：本文由 网易云 发布。 作者：周思华 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 本文尝试描述Beam模型和Stream & Table理论间的关系（前者描述于数据流模型论文、the-world-beyond-batch-streaming101和the-world-beyond-batc
阅读全文
摘要：本文由 网易云 发布。 作者：唐雕龙 本篇文章仅限内部分享，如需转载，请联系网易获取授权。 面向新手的hadoop+hive学习环境搭建，加对我走过的坑总结，避免大家踩坑。 对于hive相关docker，并没有官方的docker,第三方维护经过测试各种不靠谱，所以才想到自己搭建一套，然后后期在整理成
阅读全文
摘要：本文由 网易云 发布。 作者：网易/刘勋（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 面对海量且持续增加的各式各样的数据对象，你是否有信心知道哪些数据从哪里来以及它如何随时间而变化？采用Hadoop必须考虑数据管理的实际情况，元数据与数据治理成为企业级数据湖的重要部分。 为寻求数据治
阅读全文
摘要：本文由 网易云 发布。 作者：张淞（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 昨夜，网易有数产品经理路过开发的显示屏前见到了类型这样的一张图： 于是想到有数能不能做出这样的图来？作为有数的开发的我在一边思索了一下，开了一下脑洞，结合最近做的网易有数的新功能，觉得可以实现，于是就开始
阅读全文
摘要：本文由 网易云 发布。 作者：汪谦 （本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 企业要想良好经营，必须能留得住客户，最好每个客户都能成为回头客。本篇将介绍如何利用网易有数最近推出的“跨视图粒度计算”来进行回头客分析。 先放几张示例图。 示例一：首次复购间隔月份分布情况，比如箭头所指
阅读全文
摘要：本文由 网易云 发布。 作者：汪谦 （本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 在制作可视化报告时，会遇到如下需求：动态显示图表的标题。 如下图所示，右侧图表标题的显示内容会根据左侧选中的数据项发生变化。 当左侧未选中任何省份时，右侧显示全国的销售额，同时标题显示“全国各年销售额”
阅读全文
摘要：对本次线下活动感兴趣的朋友，欢迎点击此处报名，领取免费票。 今年3月，Docker刚刚过完5岁生日，五年期间，Docker也逐渐在技术和实践方面趋于成熟，更是在去年年底主动拥抱Kubernetes。 5月19日，网易云将联合Docker官方主办Docker Meetup，邀请业界Docker深度实践
阅读全文
摘要：本文由 网易云 发布。 概述 出于对可扩展性和性能的考虑，UDF已变成大数据生态圈查询引擎的必备功能之一，无论是Calcite、Hive、Impala都对其进行支持，但是UDF的支持有利也有弊，好处在于它提供了对某些用户独有需求的支持，例如某些产品需要将表中的某字段使用自定义的方式解析成可读字段，例
阅读全文
摘要：本文由 网易云 发布。 Kudu是Cloudera开源的新型列式存储系统，是Apache Hadoop生态圈的新成员之一（incuba ng），专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺。本文主要对Kudu的动机、背景，以及架构进行简单介绍。 背景——功能上的空白 H
阅读全文
摘要：本文由 网易云 发布。 1 概述 本文主要介绍kudu底层存储引擎的数据组织方式，先看整体结构如下： 一张表会分成若干个tablet ， 每个tablet 包括MetaData 元信息及若干个RowSet ， RowSet 包含一个MemRowSet 及若干个DiskRowSet ， DiskRow
阅读全文
摘要：本文由 网易云 发布。 背景 Cloudera在2016年发布了新型的分布式存储系统——kudu，kudu目前也是apache下面的开源项目。Hadoop生态圈中的技术繁多，HDFS作为底层数据存储的地位一直很牢固。而HBase作为Google BigTable的开源产品，一直也是Hadoop生态圈
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣（本篇文章仅限内部分享，如需转载，请联系网易获取授权。） 本文由 网易云 发布。 作者：范欣欣（本篇文章仅限内部分享，如需转载，请联系网易获取授权。） Region自动切分是HBase能够拥有良好扩张性的最重要因素之一，也必然是所有分布式系统追求无限扩展性的一副良
阅读全文
摘要：本文由 网易云 发布。 易盾业务风控周报每周呈报值得关注的安全技术和事件，包括但不限于内容安全、移动安全、业务安全和网络安全，帮助企业提高警惕，规避这些似小实大、影响业务健康发展的安全风险。 1.文化部再次审查直播和游戏产品，已下架4939款直播应用 4月17日，国家文化和旅游局发文表示，正在对30
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 本文内容接上一篇Apache 流框架 Flink，Spark Streaming，Storm对比分析（一） 2.Spark Streaming架构及特性分析 2.1 基本架构 基于是spark core的spark streaming架构。 Spark Streaming是将
阅读全文
摘要：本文由 网易云 发布。 1.Flink架构及特性分析 Flink是个相当早的项目，开始于2008年，但只在最近才得到注意。Flink是原生的流处理系统，提供high level的API。Flink也提供 API来像Spark一样进行批处理，但两者处理的基础是完全不同的。Flink把批处理当作流处理中
阅读全文
摘要：本文由 网易云 发布。 作者：汪谦 （本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 本文将介绍如何通过有数直观分析销售代表在各类目商品的销售贡献。 先上效果图 通过该图表，我们可以快速了解销售代表的收入贡献，比如当我们选中“薛婷”时，蓝色的柱子表示“薛婷”的销售额，背景的灰色柱子表示公
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 前言 Impala是一个MPP架构的查询系统，为了做到平台化服务，首先需要考虑就是如何做到资源隔离，多个产品之间尽可能小的甚至毫无影响。对于这种需求，最好的隔离方案无疑是物理机器上的隔离，A产品使用这几台机器，B产品使用那几台机器，然后前端根据产品路由到不同集群，这样可以做到
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣 本篇文章仅限本站分享，如需转载，请联系网易获取授权。 操作系统这个话题其实很早就想拿出来和大家分享，拖到现在一方面是因为对其中各种理论理解并不十分透彻，怕讲不好；另一方面是这个问题好像一直以来都很少有人关注，这里算是给这个话题开个头。其实这几个参数前前后后看过好
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣 本篇文章仅限本站分享，如需转载，请联系网易获取授权。 HBase自身具有极好的扩展性，也因此，构建扩展集群是它的天生强项之一。在实际线上应用中很多业务都运行在一个集群上，业务之间共享集群硬件、软件资源。那问题来了，一个集群上面到底应该运行哪些业务可以最大程度上利
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 作者：魏辛逸（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 在一些工作场合中，可能会发现这样一个场景： 老板甩了一份报表给视觉设计师，让他转换成一张美观的数据展示图方便做报告，看着这一堆数字，设计师犯了难，你让我对三五个数据进行艺术加工和表达没有问题，如何处理这
阅读全文
摘要：本文由 网易云 发布。 作者：范欣欣（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 最近想来，大数据相关技术与传统型数据库技术很多都是相互融合、互相借鉴的。传统型数据库强势在于其久经考验的SQL优化器经验，弱势在于分布式领域的高可用性、容错性、扩展性等，假以时日，让其经过一定的改造，比
阅读全文
摘要：本文由 网易云 发布。 作者：吴彬彬（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 我们在生活中，会经常听说两种推理模式，一种是归纳 一种是演绎，这两种思维模式能够帮助数据分析师完成原始的业务逻辑积累，在此基础上快速定位业务问题，提升分析效率，但是对于刚入门的数据分析师，在项目经验不足
阅读全文
摘要：本文由 网易云 发布。 作者：刘阳（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 地图所有人都很熟悉，但估计许多人都不知道我们平时看到的地图中是存在许多门道的，今天我就来一一道来。 先来看看我们平时最常见的世界地图是长这样的。 我们很容易联想到这样一个图形是无法平整的贴在一个球体表面的
阅读全文
摘要：本文由 网易云 发布。 2018年，文娱视听行业首先感受到一股监管寒潮，一大批知名泛娱乐产品遭到监管约谈。内容安全成为行业不得不重视的Top问题，视听系统的构建绕不开内容安全，视听行业的从业者也需要越来越关注内容安全。LiveVideoStack邮件采访了国内内容安全领先厂商网易云易盾CTO朱浩齐，
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 作者：王文开（本篇文章仅限知乎内部分享，如需转载，请取得作者同意授权。） 要说整车厂的核心业务是什么，说白了就是两个：一个是造车，一个是卖车；我今天想来聊一聊卖车，也就是整车厂的销售业务。 目前中国的汽车销售模式都是通过经销商的（暂时不考虑那些垂直的汽车电商，不是本文的重点）
阅读全文
摘要：本文由 网易云 发布。 1月20日，“走进网易：移动测试与安全实践”公开活动在杭州西湖区颐高创业大厦4F楼友会创业咖啡厅举行。本次活动的议题聚焦在如何实现应用的高效开发、安全过检、开发功耗降到最低等热门话题。 现场多位来自网易、华为的技术专家分享了他们工作中的相关经验和技术实践。其中网易资深安全开发
阅读全文
摘要：本文由 网易云 发布。 以下为正文： 3月25日，2018 Unity技术路演首站：移动游戏技术分享日在广州举办。此次活动，旨在为移动游戏开发者们搭建一个更好的交流平台，学习Unity在移动游戏开发领域的最新工具与应用技巧，分享最炫酷的游戏开发与行业应用案例，了解移动游戏开发中的安全问题所能给企业带
阅读全文
摘要：本文由 网易云 发布。 “知物由学”是网易云易盾打造的一个品牌栏目，词语出自汉·王充《论衡·实知》。人，能力有高下之分，学习才知道事物的道理，而后才有智慧，不去求问就不会知道。“知物由学”希望通过一篇篇技术干货、趋势解读、人物思考和沉淀给你带来收获的同时，也希望打开你的眼界，成就不一样的你。当然，如
阅读全文
摘要：本文由 网易云 发布。 工信部官网 2017年年底，经专家评审和遴选，中华人民共和国工业和信息化部（以下简称“工信部”）公示了2017年电信和互联网行业网络安全试点示范项目，网易云易盾的“自适应DDoS攻击深度检测和防御系统”入选，成为示范项目。 工信部官网对外公布的文档 传统的DDoS防护基于防火
阅读全文
摘要：本文由 网易云 发布。 郑栋老师, 网易互联网分析产品、可视化 BI 产品负责人。多年从事大数据技术相关工作，目前在网易管理互联网分析、敏捷BI两个数据分析产品线，在大数据技术、互联网业务数据体系建设、团队管理方面有丰富的经验。 负责过网易旗下多个业务及产品的数据体系建设工作，也有应用分析、营销监测
阅读全文
浙公网安备 33010602011771号