摘要： 转载 https://blog.csdn.net/weixin_41407477/article/details/86090430 在使用Python的时候，需要把安装的Package通过requirements.txt 给导出来，让其他使用者更加方便的安装： 在当前环境执行生成文件： pip fr 阅读全文

摘要： 假设我们本意是希望只接受部分域名的请求，对其他域名不作处理 举个例子：接受的域名是163.com 下面是个用正则和用get_tld的对比程序 from tld import get_tldimport reurl="http://baidu.com\mmmest.126.com"print(url) 阅读全文

摘要： import datetime weekday_transfer = { 0: '周一', 1: '周二', 2: '周三', 3: '周四', 4: '周五', 5: '周六', 6: '周日' } week = datetime.datetime.now().weekday() print(we 阅读全文

摘要： def __init__(self): self.es = elasticsearch.Elasticsearch(["xxxxx:9200", "xxxxx:9201", "xxxxx:9202"], http_auth=('user', 'passwd')) 阅读全文

摘要： 1、docker-compose.yml 这里的volume挂载中config的挂载挂载方式： 先#注释掉config的挂载，然后启动es，将config整个目录copy到宿主机的config目录中，修改文件权限。然后去掉注释，重新启动就可以成功挂载 version: '3' services: e 阅读全文

摘要： 转载：https://www.jianshu.com/p/cdfc3df9e4c6 kafka的每个topic都可以创建多个partition，partition的数量无上限，并不会像replica一样受限于broker的数量，因此partition的数量可以随心所欲的设置。那确定partition 阅读全文

摘要： 转载：https://www.cnblogs.com/hyl8218/p/10058873.html 一、scan filter使用 比较器：前面例子中的regexstring:2014-11-08.*、binary:\x00\x00\x00\x05，这都是比较器。HBase的filter有四种比较 阅读全文

摘要： 通常我们都会用 hbase org.apache.hadoop.hbase.mapreduce.RowCounter '表名' 来统计hbase表有多少行 这里记录一个小坑，在hbase shell模式下这个不可用 退出hbase shell模式就可以了 参见 https://stackoverfl 阅读全文

摘要： from confluent_kafka import Consumer, TopicPartition import time import datetime def str_to_timestamp(str_time, format_type='%Y-%m-%d %H:%M:%S'): time 阅读全文

摘要： #Kibana使用Elasticsearch中的索引来存储已保存的搜索，可视化和仪表板#如果索引尚不存在，Kibana会创建一个新索引#默认.kibanakibana.index: ".kibana" 如果.kibana中的数据较少，且不在乎，可以直接删掉.kibana索引，让系统重新自动创建一个。 阅读全文