07 2018 档案
摘要：本文来自网易云社区。 市场调研是一个系统的具有逻辑的行为，其中的数据分析更是占据了市场调研的工作量中的一大部分，对于市场调研的必要性和目的性，前面说得很清楚，不做搬运了，在这里需要补充强调说明一点：就是调研数据的可视化！ 调研结束了，数据也分析了，但是怎么样才能让老板看着明白，看着爽呢，那就需要数据
阅读全文
摘要：本文来自网易云社区。 精准营销的 5W 模型已有不少答案分说，实质就是将目标客户分类（或者是分级），有针对性地制定营销策略。基于大数据的精准营销就是利用大数据技术来支持精确分类，预测营销效果，并根据执行结果、时效性持续改进策略。 我们对精准营销的期待，不外乎降低获客成本、提升营销效率，然而“精准”首
阅读全文
摘要：本文来自网易云社区。 从20世纪80年代开始，商业智能的定义出现在人们面前，早期商业智能十分基础和杂乱，不仅仅会把数据处理放进去、还包含有一些可视化方面内容等。这个时期的BI主要的功能是支持多维分析和报表填写。 随着发展，基于语义层这类的工具产品日益成为主流，大家都在争先恐后的发展基于NLP的BI，
阅读全文
摘要：本文来自网易云社区。 数据仓库作为企业提供决策支持而构建的集成化数据环境，本身并不产生或者消费数据，基本架构包含的是数据流入流出的过程，首先放上一张数据仓库的架构图。数据仓库作为中间集成化数据管理的一个平台，底层有多种数据来源，流入数据仓库之后对上层应用开放。 1、分析业务需求，确定数据仓库主题 数
阅读全文
摘要：本文来自网易云社区。 数据挖掘软件首推R，它的优点在于函数都给你写好了，你只需要知道参数的形式就行了，有时候即使参数形式不对，R也能“智能地”帮你适应。这种简单的软件适合想要专注于业务的人。 R作为一款用于统计分析和图形化的计算机语言及分析工具，为了保证性能，其核心计算模块是用C、C++和Fortr
阅读全文
摘要：本文来自网易云社区。 大数据应用已广泛深入我们生活的方方面面，涵盖医疗、交通、金融、教育、体育、零售等各行各业。 天气预测应用案例： 典型的案例即天气预测。各类气象指征瞬时发生，以典型的“高频复杂”的形式出现，给各类分析人员提供了大量的可参考数据，从这其中借用建模工具分析提取有效指标，是一种典型的“
阅读全文
摘要：本文来自网易云社区。 大数据的概念，是指无法在一定时间内用常规软件工具对其内容进行抓取、管理和处理的数据集合，是存储在各种存储介质中的海量的各种形态数据，具有 5V 特点，即：Volume (大量)、Velocity (高速)、Variety (多样)、Value (价值密度)、Veracity（真
阅读全文
摘要：本文来自网易云社区。 大数据的分析和挖掘在医疗领域的应用包含很多的方向，比如临床操作的比较效果研究、临床决策支持系统、医疗数据透明度、远程病人监控、对病人档案的先进分析；临床试验数据分析、个性化治疗、疾病模式的分析等；还有患者临床记录和医疗保险数据集等。 大数据的分析和挖掘技术的运用可以在一定程度上
阅读全文
摘要：本文来自网易云社区。 面对海量的各种来源的数据，如何对这些零散的数据进行有效的分析，得到有价值的信息一直是大数据领域研究的热点问题。大数据分析处理平台就是整合当前主流的各种具有不同侧重点的大数据处理分析框架和工具，实现对数据的挖掘和分析，一个大数据分析平台涉及到的组件众多，如何将其有机地结合起来，完
阅读全文
摘要：本文来自网易云社区。 下面简单介绍几款比较有代表性的大数据分析平台： 1、 Cloudera 作为全球认知度最高的大数据平台公司，国内90%的版本基本都是在CDH的基础上封装的，对社区的掌控力最大。与国际软件供应商联手，产品涵盖大数据平台、ETL、高级分析、数据可视化等各个方面。Cloudera提供
阅读全文
摘要：本文来自网易云社区。 在数字时代，人们的生活方式和思考方式已经发生了变化，同样人们的消费观念也发生了变化。它赋予消费者更广阔的视野，同时也提高了消费者的自主意识。互联网使得很多信息都公开化，消费者不仅了解产品的具体信息还能搜索出使用评论。在这种背景下，如果企业和厂商对消费者发生的变化置之不理，还是“
阅读全文
摘要：本文来自网易云社区。 “大数据”作为时下最时髦的词汇，开始向各行业渗透辐射，颠覆着很多特别是传统行业的管理和运营思维。在这一大背景下，大数据也触动着餐饮行业管理者的神经，搅动着餐饮行业管理者的思维；大数据在餐饮行业释放出的巨大价值吸引着诸多餐饮行业人士的兴趣和关注。 餐饮业行业竞争激烈而又利润微薄，
阅读全文
摘要：本文来自网易云社区。 百科是这样定义数据挖掘和数据分析的。 数据分析：是指用适当的统计分析方法对收集来的大量数据进行分析，提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这一过程也是质量管理体系的支持过程。在实用中，数据分析可帮助人们作出判断，以便采取适当行动。数据分析的数学基础在20世
阅读全文
摘要：本文来自网易云社区。 政府掌握着全社会量最大、最核心的数据。了解政府大数据应用的案例和数据有助于释放政府数据的价值，也有利于民众对政府的了解。下面来看看大数据在政府中的应用案例。 大数据在政府中的应用案例 一、 工商部门主要对企业异常行为监测预警 依托大数据资源，建设市场主体分类监管平台，将市场主体
阅读全文
摘要：本文来自网易云社区。 伴随应用商店和社交网络的兴起，游戏市场规模空前扩大，大数据和人工智能对于游戏运营特别是延长产品寿命的积极作用越发明显。但什么样的数据有价值？如何更有效的利用数据的价值？以及人工智能具体可以将游戏行业颠覆到何种程度？都逐渐成为游戏行业共同关注的问题。那么，游戏企业可以利用大数据为
阅读全文
摘要：本文来自网易云社区。 随着时代的发展，计算机技术已经成为了人们生活以及日常办公必不可少的重要手段，尤其是近两年来，大数据以及云计算已经成为了企业管理的重要手段，不仅帮助企业提升业务管理，同样对于企业的人力资源管理同样起着重要的作用。从当前时代发展的角度来看，利用大数据进行人力资源分析，能够更好的帮助
阅读全文
摘要：本文来自网易云社区。 在金融行业中，客户关系管理、风险计量与管理、精准营销、交易执行、安全与反欺诈等所需的业务分析都需要大数据分析与挖掘，而这些正是实现迅速和科学决策的核心基础。大数据时代背景驱动的金融行业转型主要体现在实现严格有效的监管、机构精细化管理、业务创新提高竞争力等三大方面。而大数据技术正
阅读全文
摘要：本文来自网易云社区。 首先需要看数据分析目的，这个毋庸置疑。 不过整体不外乎以下几个目的： 对内：产品迭代，对外：精准营销 1：产品迭代分析用户行为就是诸如埋点测试等方面，先上王道，随便找了张访问频率的用户行为报表： 从这里面可以看出用户的各类登录行为，从国家到个人，通过分析可以得出不同国家的市场用
阅读全文
摘要：本文来自网易云社区。 常用的数据挖掘软件还是有很多的，各有千秋。对学习数据挖掘的学生来说，如何选择确实是道难题，下面就介绍一下几种常用的挖掘软件的特点，供大家参考。 数据挖掘软件首推R，它的优点在于函数都给你写好了，你只需要知道参数的形式就行了，有时候即使参数形式不对，R也能“智能地”帮你适应。这种
阅读全文
摘要：本文来自网易云社区。 关于如何选择BI数据可视化工具，总体而言，主流BI产品在选择的时候要除了需要考虑从数据到展现、从公司内到公司外等各种场景，结合前面朋友的回答，还需要考虑以下几点：1：以后的数据处理能力，是否能够在大批量，上亿条数据的情况下给出解决方案；2：BI的侧重点是不是和公司的需求匹配，如
阅读全文
摘要：本文来自网易云社区。 麦肯锡对于“大数据”的定义是：一种规模大到在获取、存储、管理、分析方面大大的超出了传统数据库软件工具能力范围的数据集合，具有4V特征，即Volumn（海量的规模）、Velocity（快速的流转）、Variety（多样的类型）和Value（低密度的价值）。“大”指的是数据规模，大
阅读全文
摘要：本文来自网易云社区。 大数据和数据挖掘技术的发展给解决交通中存在的问题带来了新的思路。大数据缓解交通堵塞，改善交通服务，促进了智能交通系统更好更快的发展。 在目前的技术条件和发展水平下，大数据在交通中的应用主要有以下几种方式： 1.公共交通部门发行的一卡通大量使用，因此积累了乘客出行的海量数据，这也
阅读全文
摘要：一、问题 首先，我们思考这样一个问题： 访问k8s集群中的pod， 客户端需要知道pod地址，需要感知pod的状态。那如何获取各个pod的地址？若某一node上的pod故障，客户端如何感知？ 二、k8s service 什么是service 是发现后端pod服务； 是为一组具有相同功能的容器应用提供
阅读全文
摘要：1.获取官方镜像 从dockerhub获取官方的zookeeper镜像： 2.了解镜像内容 拉取完镜像后，通过 我们可以查看到关于该镜像的一些基本信息： 即，该zookeeper的版本是3.4.10，conf目录在/conf，基于该镜像启动的容器的entrypoint为 默认传入的参数为 基于该镜像
阅读全文
摘要：已经有好一阵子没有写博文了，今天给大家带来一篇最近一段时间开发相关的文章：在impala和kudu上支持runtime filter。 大家搜索下实践者社区，可以发现前面已经有好几位同学写了这个主题的博文（都是我们组的^_^），说明这个功能在数据库领域的重要性，所以，嘿嘿，再敲一遍黑板：“重点，必考
阅读全文
摘要：去年10月份放下了一手打造的缓存服务（NKV和NCR），投身到新成立的数据科学中心从事大数据存储相关的工作，新的部门、新的项目、新的知识，脚踏实地，从零开始。 第一款调研的对象是cloudera公司刚开源的kudu产品，可以将其理解为是hadoop系统中的hdfs，一个存储引擎，但是和hdfs的不同
阅读全文
摘要：本篇将向大家介绍如何快捷的安装部署GreenPlum测试集群，大家可以跟着我一块儿实践一把^_^ 1.主机资源 申请2台网易云主机，操作系统必须是RedHat或者CentOS，配置尽量高一点。如果是sa统一初始化的物理机，这里不再描述，因为中间有很多操作（比如关闭puppet服务等等） 2.下载安装
阅读全文
摘要：在《 【大数据之数据仓库】选型流水记》一文中有提及，当时没有测试GreenPlum的quicklz压缩算法和ORCA查询优化器，考虑到quicklz压缩算法因为版权问题不会开源（详情请参阅： https://github.com/greenplum-db/gpdb/blob/master/src/b
阅读全文
摘要：1.背景 一张UML类图可以简单的说明GreenPlum和DeepGreen之间的关系： GreenPlum： 主页：http://greenplum.org/ 源码：开源，https://github.com/greenplum-db/gpdb， 主页：http://greenplum.org/
阅读全文
摘要：谈到GreenPlum，肯定会有同事说HAWQ！是的，在本系列第一篇选型流水记里，也有提到。因为对HAWQ接触有限，没有深入具体了解，所以很多信息都是来自于博文，人云亦云，我把看过的资料简要整理，希望对感兴趣的同事有一些帮助^_^ HAWQ的身世：https://www.pivotalguru.co
阅读全文
摘要：这是【kudu pk parquet】的第二篇，query2在kudu和parquet上的对比解析，其中kudu包含有不能下发的谓词。 3台物理机，1T规模的数据集，impala和kudu版本是我们修改后支持runtime filter的版本，结果对比如下图： 纵坐标表示耗时，矮表示性能好，耗时短，
阅读全文
摘要：ARKit介绍 ARKit是iOS11引入的一个全新的框架，使用Visual Inertial Odometry(VIO，视觉惯性里程计)来精确跟踪现实世界中的真实场景。相比其它设备平台，ARKit中的VIO可以将传感器数据和CoreMotion的数据融合在一起，从而提供更为精确的信息。ARKit可
阅读全文
摘要：服务初始化阶段 nova-compute服务启动时调用manager中的host初始化函数 在host初始化函数中完成如下操作： _init_instance完成了虚拟机状态的同步，同步规则如下： init_host中对事件处理的初始化: #注册异常处理函数，这里的libvirt_error_han
阅读全文
摘要：统一图片加载库接口设计 本文背景 云课堂android端，目前使用的图片加载库是UniversalImageLoader（简称UIL）。在5.4.0迭代版本中，因首页又增加了几个页面，发现启动app后，内存暴增，在排查问题后发现，是图片加载库的使用方式存在问题，以及该加载库对内存并不友好。因此在对比
阅读全文
摘要：随着互联网的发展，网站全面 https 化已经越来越被重视，做为 App 开发人员，从一开始就让 API 都走 SSL 也是十分必要的。但是光这样就足够了吗？ SSL 可以保护线上 API 数据不被篡改，但是防不了别有用心的发现你们 API，然后写脚本做一些事情。 Charles 的 SSL 代理
阅读全文
摘要：架构腐化一词我已经忘了从哪本书上看到的了，但是这个词给我留下了非常深刻的印象。关键在于“腐”一词，充分而又形象的描述了架构是怎样一步一步从简单清爽走向复杂污秽的。请允许我用“污秽”一词来描述一个糟糕的架构，因为糟糕的架构就像是一潭散发着臭味的淤泥，让你不想靠近，一旦涉入其中就会难以自拔，苦不堪言。
阅读全文
摘要：一年前，刚来网易实习的时候接触了NEJ，那是第一次接触模块化开发，感觉想出这个点子的人简直是天才，同时也对于这种框架的实现非常好奇，惭愧的是，那时甚至连jQuery的原理都不知道。 随着这一年对于JS面向对象的理解有所加深，看着《JavaScript设计模式》就跟着自己动手码码代码，所以这是一篇读书
阅读全文
摘要：前言 kubernates 1.3出了几个新的概念，其中包括deployments，Replica Sets，并且官网称之为是the next-generation Replication Controller。由于NCE项目马上就要使用其中包括deployments以及RS这个方式来管理pod，因
阅读全文
摘要：前两天听了姜老大关于InnoDB中锁的相关培训，刚好也在看这方面的知识，就顺便利用时间把这部分知识做个整理，方便自己理解。主要分为下面几个部分 1. InnoDB同步机制 InnoDB存储引擎有两种同步机制选择，一种是mutex，其是完全的互斥方法。另一种是rw-lock，可以给临界资源加上s-la
阅读全文
摘要：翻译自：How JavaScript works: the rendering engine and tips to optimize its performance 这是探索 JavaScript 及其构建组件专题系列的第 11 篇。在识别和描述核心元素的过程中，我们分享了在构建 SessionS
阅读全文
摘要：3 router 框架优化 3.1 apt 生成代码量过大问题优化 思考框架本身，其实可以发现仅有 router 映射表是需要根据注解编译生成的，其他的全部代码都是固定代码，完全可以 sdk 中直接编码提供。反过来思考为何当初 sdk 开发需要编写繁重的 apt 生成代码，去生成这些固定的逻辑，可以
阅读全文
摘要：0 背景 早前严选 Android 工程，使用原生 Intent 方式做页面跳转，为规范参数传递，做了编码规范，使用静态方法的方式唤起 Activity OrderCommoditiesActivity CouponListActivity 不过采用原生的方式，在应用 H5 唤起 APP 和 推送唤
阅读全文
摘要：中国杭州云创大会如约而至，作为一场汇聚行业领袖及技术大咖及产业链从业者的科技盛会，本届云创大会将以“开放、生态、赋能”为主题，探讨数字化浪潮下云计算、大数据的发展方向和应用趋势，重点解析工业智能互联网和数字化产业园区的升级之路。 ▼ “开放”成为重要主题之一 本届大会将以“开放·生态·赋能”为主题，
阅读全文
摘要：七月第一周，网易云社区联合清华大学出版社为大家送出13本数据分析以及移动开发的书籍（Python、SpingBoot、Entity Framework、Ionic、MySQL、深度学习、小程序开发等）。以下为书籍简介，送书福利请见文末哦~ 1． 书名：玩转Python网络爬虫出版单位：清华大学出版社
阅读全文
摘要：7月初，又一波送书福利来袭，网易云社区 联合 图灵出版社为大家推荐10本让你重新认识人工智能、数学、物理的书籍（人工智能、用数学的语言看世界、几何世界的邀请、物理奇遇记等）。以下为书籍简介，文末有送书福利哦 1. 《人工智能简史》 本书全面讲述人工智能的发展史，几乎覆盖人工智能学科的所有领域，包括人
阅读全文
浙公网安备 33010602011771号