摘要：1.今日收获内容 re.compile 函数 compile 函数用于编译正则表达式，生成一个正则表达式（ Pattern ）对象，供 match() 和 search() 这两个函数使用。 语法格式为： re.compile(pattern[, flags]) >>>import re >>> p 阅读全文

摘要：Hive 数据仓库工具 将结构化数据映射为一张数据库表,常用MySQL存储 提供类sql语句查询功能,在驱动中可进行类sql语句向mapreduce作业的翻译,优化和执行 学习成本低,适合进行数据的统计分析 实际数据存储在HDFS上,mysql中存储一张映射表用于实现查询功能 mapreduce的主 阅读全文

摘要：Hadoop Distributed File System 分布式文件系统优点 高可用, 快速自动恢复发生错误的节点, 保证数据拷贝设定的副本数量 高吞吐, 流式访问数据集,批处理而非交互, 延迟高 数据块存储, 默认128M/块,可修改 数据一致性, 一写多读,可追加不可修改 移动计算比移动数据 阅读全文

摘要：开源的分布式系统基础架构优点 对大量数据进行分布式处理 可靠, 假设硬件失效为常态, 针对失败节点进行重新分布处理 高效, 并行处理提高处理速度 可伸缩, 在横向扩展至上千个节点, 可处理PB级数据 低成本, 项目开源,与同类产品比较成本低廉 相关组件包括 HDFS MapReduce Yarn H 阅读全文

摘要：Request： 1. request对象和response对象的原理 1. request和response对象是由服务器创建的。我们来使用它们 2. request对象是来获取请求消息，response对象是来设置响应消息 2. request对象继承体系结构： ServletRequest - 阅读全文