博客园 - Frankdeng
uuid:24b78886-0ed1-41c2-8670-e3f31dcf42c4;id=184169
2019-03-15T04:33:28Z
Frankdeng
https://www.cnblogs.com/frankdeng/
feed.cnblogs.com
https://www.cnblogs.com/frankdeng/p/9487913.html
Kylin的简介与安装部署 - Frankdeng
一.Kylin的概述 官方网址:http://kylin.apache.org/cn/ Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询
2018-12-23T14:59:00Z
2018-12-23T14:59:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Kylin的概述 官方网址:http://kylin.apache.org/cn/ Apache Kylin™是一个开源的分布式分析引擎,提供Hadoop/Spark之上的SQL查询接口及多维分析(OLAP)能力以支持超大规模数据,最初由eBay Inc. 开发并贡献至开源社区。它能在亚秒内查询 <a href="https://www.cnblogs.com/frankdeng/p/9487913.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/10136230.html
CDH搭建Hadoop集群(Centos7) - Frankdeng
一、说明 二、系统环境搭建 1、网络配置(所有节点) 1.设置主机名和IP 2.配置/etc/hosts IP和主机名的映射 2、SSH免密码登录 1.产生公钥和私钥:ssh-keygen -t rsa (一直回车直即可) 2.将公钥分发给所有节点(包括本机): ssh-copy-id -i 主机名
2018-12-23T14:38:00Z
2018-12-23T14:38:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一、说明 二、系统环境搭建 1、网络配置(所有节点) 1.设置主机名和IP 2.配置/etc/hosts IP和主机名的映射 2、SSH免密码登录 1.产生公钥和私钥:ssh-keygen -t rsa (一直回车直即可) 2.将公钥分发给所有节点(包括本机): ssh-copy-id -i 主机名 <a href="https://www.cnblogs.com/frankdeng/p/10136230.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/10121065.html
Ubuntu安装VirtualBox以及CentOS7.5联网设置 - Frankdeng
一.virtualBox的安装 官方Liunx版本下载地址: https://www.virtualbox.org/wiki/Linux_Downloads 这里选择下载ubuntu 16.04 AMD64 ,下载出来的deb格式 直接双击输入用户密码安装完成即可,启动VirtualBox报错如下信
2018-12-14T16:30:00Z
2018-12-14T16:30:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.virtualBox的安装 官方Liunx版本下载地址: https://www.virtualbox.org/wiki/Linux_Downloads 这里选择下载ubuntu 16.04 AMD64 ,下载出来的deb格式 直接双击输入用户密码安装完成即可,启动VirtualBox报错如下信 <a href="https://www.cnblogs.com/frankdeng/p/10121065.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9834048.html
ubuntu的常用liunx命令 - Frankdeng
一.基本命令 1.查看Ubuntu版本 2.查看位数 3.查看内核版本 二.系统服务 1.用户组 Useradd 创建一个新的用户 Groupadd 组名 创建一个新的组 Passwd 用户名 为用户创建密码 Passwd -d用户名 删除用户密码也能登陆 Passwd -S用户名 查询账号密码 U
2018-11-29T05:45:00Z
2018-11-29T05:45:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.基本命令 1.查看Ubuntu版本 2.查看位数 3.查看内核版本 二.系统服务 1.用户组 Useradd 创建一个新的用户 Groupadd 组名 创建一个新的组 Passwd 用户名 为用户创建密码 Passwd -d用户名 删除用户密码也能登陆 Passwd -S用户名 查询账号密码 U <a href="https://www.cnblogs.com/frankdeng/p/9834048.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9945640.html
ubuntn16.04 连接vpn设置 - Frankdeng
安装 L2TP协议安装: 1. 添加PPA sudo apt-add-repository ppa:seriy-pr/network-manager-l2tp 2. 刷新软件包缓存 sudo apt-get update 3. 安装network-manager-l2tp sudo apt-get
2018-11-12T03:52:00Z
2018-11-12T03:52:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】安装 L2TP协议安装: 1. 添加PPA sudo apt-add-repository ppa:seriy-pr/network-manager-l2tp 2. 刷新软件包缓存 sudo apt-get update 3. 安装network-manager-l2tp sudo apt-get <a href="https://www.cnblogs.com/frankdeng/p/9945640.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9760015.html
Flink(三)Flink开发IDEA环境搭建与测试 - Frankdeng
一.IDEA开发环境 1.pom文件设置 2.flink开发流程 Flink具有特殊类DataSet并DataStream在程序中表示数据。您可以将它们视为可以包含重复项的不可变数据集合。在DataSet数据有限的情况下,对于一个DataStream元素的数量可以是无界的。 这些集合在某些关键方面与
2018-10-21T06:47:00Z
2018-10-21T06:47:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.IDEA开发环境 1.pom文件设置 2.flink开发流程 Flink具有特殊类DataSet并DataStream在程序中表示数据。您可以将它们视为可以包含重复项的不可变数据集合。在DataSet数据有限的情况下,对于一个DataStream元素的数量可以是无界的。 这些集合在某些关键方面与 <a href="https://www.cnblogs.com/frankdeng/p/9760015.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9400627.html
Flink(二)CentOS7.5搭建Flink1.6.1分布式集群 - Frankdeng
一. Flink的下载 安装包下载地址:http://flink.apache.org/downloads.html ,选择对应Hadoop的Flink版本下载 Flink 有三种部署模式,分别是 Local、Standalone Cluster 和 Yarn Cluster。 二. Local模式
2018-10-09T09:18:00Z
2018-10-09T09:18:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一. Flink的下载 安装包下载地址:http://flink.apache.org/downloads.html ,选择对应Hadoop的Flink版本下载 Flink 有三种部署模式,分别是 Local、Standalone Cluster 和 Yarn Cluster。 二. Local模式 <a href="https://www.cnblogs.com/frankdeng/p/9400627.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9400622.html
Flink(一)Flink的入门简介 - Frankdeng
一. Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内存计算的飞速发展。Spark 的火热或多或少的掩盖了其他分布式计算的系统身
2018-10-08T11:09:00Z
2018-10-08T11:09:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一. Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm,以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内存计算的飞速发展。Spark 的火热或多或少的掩盖了其他分布式计算的系统身 <a href="https://www.cnblogs.com/frankdeng/p/9400622.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9572021.html
Storm(四)Storm整合kafka的API编程与任务提交 - Frankdeng
该文被密码保护。
2018-09-28T04:06:00Z
2018-09-28T04:06:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
该文被密码保护。
https://www.cnblogs.com/frankdeng/p/9572017.html
Storm(三)Storm的原理机制 - Frankdeng
一.Storm的数据分发策略 1. Shuffle Grouping 随机分组,随机派发stream里面的tuple,保证每个bolt task接收到的tuple数目大致相同。 轮询,平均分配 2. Fields Grouping 按字段分组,比如,按"user-id"这个字段来分组,那么具有同样"
2018-09-22T05:27:00Z
2018-09-22T05:27:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Storm的数据分发策略 1. Shuffle Grouping 随机分组,随机派发stream里面的tuple,保证每个bolt task接收到的tuple数目大致相同。 轮询,平均分配 2. Fields Grouping 按字段分组,比如,按"user-id"这个字段来分组,那么具有同样" <a href="https://www.cnblogs.com/frankdeng/p/9572017.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9686735.html
Docker 图形化页面管理工具使用 - Frankdeng
一.Docker图形化工具 docker 图形页面管理工具常用的有三种,DockerUI ,Portainer ,Shipyard 。DockerUI 是 Portainer 的前身,这三个工具通过docker api来获取管理的资源信息。平时我们常常对着shell对着这些命令行客户端,审美会很疲劳
2018-09-21T08:52:00Z
2018-09-21T08:52:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Docker图形化工具 docker 图形页面管理工具常用的有三种,DockerUI ,Portainer ,Shipyard 。DockerUI 是 Portainer 的前身,这三个工具通过docker api来获取管理的资源信息。平时我们常常对着shell对着这些命令行客户端,审美会很疲劳 <a href="https://www.cnblogs.com/frankdeng/p/9686735.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9275092.html
Docker 简介与shell操作使用 - Frankdeng
一.Docker概述 1.Docker简介 Docker是一个开源的应用容器引擎;是一个轻量级容器技术;Docker支持将软件编译成一个镜像;然后在镜像中各种软件做好配置,将镜像发布出去,其他使用者可以直接使 用这个镜像;运行中的这个镜像称为容器,容器启动是非常快速的。 对比传统虚拟机总结: 2.D
2018-09-16T16:00:00Z
2018-09-16T16:00:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Docker概述 1.Docker简介 Docker是一个开源的应用容器引擎;是一个轻量级容器技术;Docker支持将软件编译成一个镜像;然后在镜像中各种软件做好配置,将镜像发布出去,其他使用者可以直接使 用这个镜像;运行中的这个镜像称为容器,容器启动是非常快速的。 对比传统虚拟机总结: 2.D <a href="https://www.cnblogs.com/frankdeng/p/9275092.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9646100.html
Spring Boot 入门案例与配置说明 - Frankdeng
一.Spring Boot简介 官网地址:http://spring.io/projects/spring-boot Spring Boot可以轻松创建可以运行的独立的,生产级的基于Spring的应用程序。我们对Spring平台和第三方库进行了一种自以为是的观点,这样您就可以轻松上手了。大多数Spr
2018-09-14T15:04:00Z
2018-09-14T15:04:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Spring Boot简介 官网地址:http://spring.io/projects/spring-boot Spring Boot可以轻松创建可以运行的独立的,生产级的基于Spring的应用程序。我们对Spring平台和第三方库进行了一种自以为是的观点,这样您就可以轻松上手了。大多数Spr <a href="https://www.cnblogs.com/frankdeng/p/9646100.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9568582.html
项目管理工具Maven的安装与使用 - Frankdeng
一.Maven的简介 1. 什么是maven 是Apache下的一个开源的项目,是纯java编写,并且只是用来管理java项目。 2. Maven的好处 maven项目管理jar节省磁盘空间 一键构建,可以用一个命令(tomcat:run)让项目运行起来 可以跨平台 应用于大型项目时可以提高开发效率
2018-09-12T14:39:00Z
2018-09-12T14:39:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.Maven的简介 1. 什么是maven 是Apache下的一个开源的项目,是纯java编写,并且只是用来管理java项目。 2. Maven的好处 maven项目管理jar节省磁盘空间 一键构建,可以用一个命令(tomcat:run)让项目运行起来 可以跨平台 应用于大型项目时可以提高开发效率 <a href="https://www.cnblogs.com/frankdeng/p/9568582.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9629524.html
Git(五)IDEA应用Git - Frankdeng
一.IDEA客户端git 1.提交代码到本地仓库 1. 关联Git,创建本地库 关联git 配置git环境变量 设置本地仓库目录,一般是IDEA工作空间,选择VCS->Import into Version Control->Create Git Repository,创建本地仓库 选择创建本地仓库
2018-09-12T07:14:00Z
2018-09-12T07:14:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.IDEA客户端git 1.提交代码到本地仓库 1. 关联Git,创建本地库 关联git 配置git环境变量 设置本地仓库目录,一般是IDEA工作空间,选择VCS->Import into Version Control->Create Git Repository,创建本地仓库 选择创建本地仓库 <a href="https://www.cnblogs.com/frankdeng/p/9629524.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9630249.html
Git(四)Git的分支管理 - Frankdeng
一. 创建合并分支原理 在我们每次的提交,Git都把它们串成一条时间线,这条时间线就是一个分支。截止到目前,只有一条时间线,在Git里,这个分支叫主分支,即master分支。HEAD指针严格来说不是指向提交,而是指向master,master才是指向提交的。 一开始的时候,master分支是一条线,
2018-09-11T13:59:00Z
2018-09-11T13:59:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一. 创建合并分支原理 在我们每次的提交,Git都把它们串成一条时间线,这条时间线就是一个分支。截止到目前,只有一条时间线,在Git里,这个分支叫主分支,即master分支。HEAD指针严格来说不是指向提交,而是指向master,master才是指向提交的。 一开始的时候,master分支是一条线, <a href="https://www.cnblogs.com/frankdeng/p/9630249.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9627867.html
Git(三)Git的远程仓库 - Frankdeng
一. 添加远程库 现在我们已经在本地创建了一个Git仓库,又想让其他人来协作开发,此时就可以把本地仓库同步到远程仓库,同时还增加了本地仓库的一个备份。常用的远程仓库就是github:https://github.com/,接下来我们演示如何将本地代码同步到github。 1.在github上创建仓库
2018-09-11T12:53:00Z
2018-09-11T12:53:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一. 添加远程库 现在我们已经在本地创建了一个Git仓库,又想让其他人来协作开发,此时就可以把本地仓库同步到远程仓库,同时还增加了本地仓库的一个备份。常用的远程仓库就是github:https://github.com/,接下来我们演示如何将本地代码同步到github。 1.在github上创建仓库 <a href="https://www.cnblogs.com/frankdeng/p/9627867.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9630303.html
Git(二)使用git管理文件版本(TortoiseGit ) - Frankdeng
一.创建版本库 什么是版本库呢?版本库又名仓库,英文名repository,你可以简单理解成一个目录,这个目录里面的所有文件都可以被Git管理起来,每个文件的修改、删除,Git都能跟踪,以便任何时刻都可以追踪历史,或者在将来某个时刻可以“还原”。由于git是分布式版本管理工具,所以git在不需要联网
2018-09-11T10:50:00Z
2018-09-11T10:50:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.创建版本库 什么是版本库呢?版本库又名仓库,英文名repository,你可以简单理解成一个目录,这个目录里面的所有文件都可以被Git管理起来,每个文件的修改、删除,Git都能跟踪,以便任何时刻都可以追踪历史,或者在将来某个时刻可以“还原”。由于git是分布式版本管理工具,所以git在不需要联网 <a href="https://www.cnblogs.com/frankdeng/p/9630303.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9587920.html
Git(一)Git的简介安装 - Frankdeng
一.git历史 同生活中的许多伟大事件一样,Git 诞生于一个极富纷争大举创新的年代。Linux 内核开源项目有着为数众广的参与者。绝大多数的 Linux 内核维护工作都花在了提交补丁和保存归档的繁琐事务上(1991-2002年间)。到 2002 年,Linux系统已经发展了十年了,代码库之大让Li
2018-09-11T09:41:00Z
2018-09-11T09:41:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.git历史 同生活中的许多伟大事件一样,Git 诞生于一个极富纷争大举创新的年代。Linux 内核开源项目有着为数众广的参与者。绝大多数的 Linux 内核维护工作都花在了提交补丁和保存归档的繁琐事务上(1991-2002年间)。到 2002 年,Linux系统已经发展了十年了,代码库之大让Li <a href="https://www.cnblogs.com/frankdeng/p/9587920.html" target="_blank">阅读全文</a>
https://www.cnblogs.com/frankdeng/p/9615856.html
Solr7.4.0的API(Solrj)操作 - Frankdeng
一.SolrJ的概念 solr单机版服务搭建:https://www.cnblogs.com/frankdeng/p/9615253.html solr集群版服务搭建:https://www.cnblogs.com/frankdeng/p/9597680.html SolrJ是一个API,它使用Ja
2018-09-10T15:36:00Z
2018-09-10T15:36:00Z
Frankdeng
https://www.cnblogs.com/frankdeng/
【摘要】一.SolrJ的概念 solr单机版服务搭建:https://www.cnblogs.com/frankdeng/p/9615253.html solr集群版服务搭建:https://www.cnblogs.com/frankdeng/p/9597680.html SolrJ是一个API,它使用Ja <a href="https://www.cnblogs.com/frankdeng/p/9615856.html" target="_blank">阅读全文</a>