摘要：#redis内自维护线程池,过期就断掉链接,所以不需要手动关闭链接 import redis r = redis.StrictRedis(host='host.com', port=6379) start_dt = str(r.hget('key_v2', 'start_dt'), encoding 阅读全文

摘要：工作中遇到一个小问题,需要在一个日志文件中,删选出包含emrfs sync命令和之后内容的行,格式如下, 考虑采用正则表达式来做,代码如下 阅读全文

摘要：一.简介 SerDe是Serializer/Deserializer的缩写。SerDe允许Hive读取表中的数据，并将其以任何自定义格式写回HDFS。 任何人都可以为自己的数据格式编写自己的SerDe。 序列化与反序列化的作用 1，序列化是对象转化为字节序列的过程； 2，反序列化是字节码恢复为对象的 阅读全文

摘要：python有两种配置文件,file.ini和file.json 一、ini文件如下: 对ini文件进行读写: 常用的读写方法: read(filename) 直接读取ini文件内容sections() 得到所有的section，并以列表的形式返回options(section) 得到该sectio 阅读全文