摘要: 自己的主机上的Hadoop版本是2.7.6,是测试用的伪分布式Hadoop,在前段时间部署了Hive on Spark,但由于没有做好功课,导致了Hive无法正常启动,原因在于Hive 3.x版本不适配Hadoop 2.x版本。之前我在学校服务器上部署的Hadoop版本是3.1.2,现打算将自己的从 阅读全文
posted @ 2019-08-09 22:32 buildings 阅读(7225) 评论(1) 推荐(1) 编辑
摘要: 本编随笔是小编参照个人的笔记、官方文档以及网上的资料等后对HDFS的概念以及运行原理进行系统性地归纳,说起来真的惭愧呀,自学了很长一段时间也没有对Hadoop知识点进行归纳,有时候在实战中或者与别人交流Hadoop相关技术时,很多概念也只是模模糊糊记得,并非很熟练。哈哈哈,趁着本科中最后一个暑假,把 阅读全文
posted @ 2019-07-27 02:19 buildings 阅读(14587) 评论(4) 推荐(4) 编辑
摘要: 柯里化(Currying) 把接受多个参数的函数变换成接受一个单一参数(最初函数的第一个参数)的函数,并且返回接受余下的参数而且返回结果的新函数的技术。 简单的实现如下: 假如我们应用的时候,是这样的:add(1,2) 柯里化函数: Curry化最大的意义在于把多个参数的function等价转化成多 阅读全文
posted @ 2019-07-20 00:08 buildings 阅读(715) 评论(1) 推荐(2) 编辑
摘要: 本文是基于已经安装好的ubuntu环境上搭建伪分布式hadoop,在virtualbox安装ubuntu可以参考小编的 ”virtualbox安装ubuntu16.04 LTS及其配置“ 一、Hadoop的三种运行模式(启动模式) 1.1、单机模式(独立模式)(Local或Standalone Mo 阅读全文
posted @ 2019-05-15 00:57 buildings 阅读(3053) 评论(4) 推荐(1) 编辑
摘要: 本文延续我上一篇文章(virtualbox安装ubuntu16.04 LTS及其配置)已经安装及配置好的ubuntu虚拟机。 在这里简单分享 ubuntu16.04下安装mysql的过程。 首先在终端上执行以下命令: 安装成功后可以通过下面的命令测试是否安装成功: 出现如下信息证明安装成功: 现在配 阅读全文
posted @ 2019-05-14 20:02 buildings 阅读(1303) 评论(0) 推荐(0) 编辑
摘要: 如果觉得文章有帮助,请给个赞~让更多有需要的人搜索到~ 一、下载安装VirtualBox 1. 从官网下载VirtualBox,目前版本:VirtualBox 6.0.6 for Windows hosts x86/amd64 2. 下载好之后安装VirtualBox 3. 运行VirtualBox 阅读全文
posted @ 2019-05-14 15:55 buildings 阅读(20096) 评论(0) 推荐(3) 编辑
摘要: 项目内容: 本项目选择 淘宝商品类目:零食 数量:一共100页,4400个零食商品 筛选条件:天猫、销量从高到低、价格0元到200元以内 项目目的: 对商品标题进行文本分析以及词云可视化 商品价格分布情况分析 商品的销量分布情况分析 商品价格对销量的影响分析 商品价格对销售额的影响分析 不同省份或城 阅读全文
posted @ 2019-05-08 00:00 buildings 阅读(19559) 评论(9) 推荐(12) 编辑
摘要: 这个作业的要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2753。 1.列表,元组,字典,集合分别如何增删改查及遍历。 列表操作如下所示: 集合操作如下所示: 字典操作如下所示: 2.总结列表,元组,字典,集合的联系与区别 阅读全文
posted @ 2019-03-25 21:04 buildings 阅读(702) 评论(0) 推荐(1) 编辑
摘要: 一.前提 (1)GitHub地址:https://github.com/mingbiaoleung/FourOperationWeb (2)调试环境:IntelliJ IDEA ,CHORME浏览器 二.作业要求 (1)基本要求 自动生成题目,单个题目最多不能超过4个运算符,操作数小于100。 用户 阅读全文
posted @ 2018-10-24 21:45 buildings 阅读(713) 评论(0) 推荐(0) 编辑
摘要: 本次作业要求来自:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2166 github远程仓库的地址:https://github.com/mingbiaoleung/FourOperation 第一部分:要求 1.作业需求:任何编程 阅读全文
posted @ 2018-10-10 11:32 buildings 阅读(493) 评论(2) 推荐(0) 编辑