摘要:@ 1.安装前准备 (1)安装Jdk (2)拷贝Zookeeper安装包到Linux系统下e (3)解压到指定目录 tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/ 2.配置修改 (1)将/opt/module/zookeeper-3.4.10/co 阅读全文
posted @ 2020-09-24 20:59 孙晨c 阅读(5) 评论(0) 推荐(0) 编辑
摘要:@ 概述 Zookeeper是一个开源的分布式的,为分布式应用提供协调服务的Apache项目。 Zookeeper工作机制 Zookeeper从设计模式角度来理解:是一个基于观察者模式设计的分布式服务管理框架,它负责存储和管理大家都关心的数据,然后接受观察者的注册,一旦这些数据的状态发生变化,Zoo 阅读全文
posted @ 2020-09-24 20:39 孙晨c 阅读(22) 评论(0) 推荐(0) 编辑
摘要:1)导包容易出错。尤其Text和CombineTextInputFormat。 2)Mapper中第一个输入的参数必须是LongWritable或者NullWritable,不可以是IntWritable. 报的错误是类型转换异常。 3)java.lang.Exception: java.io.IO 阅读全文
posted @ 2020-09-16 16:58 孙晨c 阅读(11) 评论(0) 推荐(0) 编辑
摘要:以下是博客的好友列表数据,冒号前是一个用户,冒号后是该用户的所有好友(数据中的好友关系是单向的) 求出哪些人两两之间有共同好友,及他俩的共同好友都有谁? 输出格式: A-B:C,E (用户-用户:共同好友...) 需求分析 分为两个job 第一次输出结果,先求出A、B、C、….等是谁的好友 Job1 阅读全文
posted @ 2020-09-16 16:56 孙晨c 阅读(18) 评论(0) 推荐(0) 编辑
摘要:@ 1.输入数据接口:InputFormat (1)默认使用的实现类是:TextInputFormat (2)TextInputFormat的功能逻辑是:一次读一行文本,然后将该行的起始偏移量作为key,行内容作为value返回。 (3)KeyValueTextInputFormat每一行均为一条记 阅读全文
posted @ 2020-09-16 15:41 孙晨c 阅读(28) 评论(0) 推荐(0) 编辑
摘要:@ 打开\创建文件 在python,使用open函数,可以打开一个已经存在的文件,或者创建一个新文件,默认在当前程序所在文件夹下创建新文件。 格式:open(文件名,访问模式),例如 f = open('test.txt','w') #以写模式打开文件,不存在就创建新文件 创建新文件时如果不指定模式 阅读全文
posted @ 2020-09-16 10:56 孙晨c 阅读(9) 评论(0) 推荐(0) 编辑
摘要:@ dict(字典) 字典是无序的对象集合,使用键-值(key-value)存储,具有极快的查找速度。 键(key)必须使用不可变类型。 同一个字典中,键(key)必须是唯一的。 常用操作 # @FILE : demo4_dict.py # @SoftWare : PyCharm ''' #字典定义 阅读全文
posted @ 2020-09-15 15:51 孙晨c 阅读(7) 评论(0) 推荐(0) 编辑
摘要:@ Tuple(元组) tuple与list类似,不同之处在于tuple的元素不能修改。tuple写在小括号里,元素之间用逗号隔开。 元组的元素不可变,但可以包含可变对象,如ist。 注意:定义一个只有1个元素的tuple,必须加逗号。 常用操作 实例 # @FILE : demo3_tuple.p 阅读全文
posted @ 2020-09-15 14:56 孙晨c 阅读(6) 评论(0) 推荐(0) 编辑
摘要:根据products列表写一个循环,不断询问用户想买什么,用户选择一个商品编号, 就把对应的商品添加到购物车里,最终用户输入q退出时,打印购买的商品列表。 products = [["iphone",6888],["MacPro",14800],["小米6",2499],["Coffee",31], 阅读全文
posted @ 2020-09-15 10:56 孙晨c 阅读(9) 评论(0) 推荐(0) 编辑
摘要:@ List(列表)简述 列表可以完成大多数集合类的数据结构实现 列表中元素的类型可以不相同,它支持数字,字符串甚至可以包含列表(嵌套) 列表是写在方括号[]之间、用逗号分隔开的元素列表 列表索引值以0为开始值,-1为从末尾的开始位置。列表可以使用+操作符进行拼接,使用*表示重复 初试牛刀 list 阅读全文
posted @ 2020-09-09 22:46 孙晨c 阅读(13) 评论(0) 推荐(0) 编辑