l_g1990

2020年9月28日

摘要：一、通过快照进行拷贝 1、在源集群执行如下命令：（1）进入Hbase shell客户端（hbase shell） snapshot 'iflyol:OsspDataAnaSysDayCube','OsspDataAnaSysDayCube_iflyol' 2、在源集群执行（hadoop账户）： / 阅读全文

posted @ 2020-09-28 11:16 l_g1990 阅读(981) 评论(0) 推荐(0)

2015年11月18日

python操作kafka

摘要： #coding=utf-8from pykafka import KafkaClientimport codecsimport logginglogging.basicConfig(level = logging.INFO)client = KafkaClient(hosts = "172.16.8... 阅读全文

posted @ 2015-11-18 15:23 l_g1990 阅读(17274) 评论(1) 推荐(0)

python抓取SparkUI中job信息

摘要： #coding=utf-8from __future__ import unicode_literalsimport codecsimport jsonimport sysimport reimport csvimport xlsxwriterfrom datetime import datetim... 阅读全文

posted @ 2015-11-18 15:17 l_g1990 阅读(448) 评论(0) 推荐(0)

python之flatten操作

摘要：例如:li=[[1,2],[3,4],[5,6]]print [j for i in li for j in i]#orfrom itertools import chainprint list(chain(*li))#ora=[[1,2],[3,4],[5,6]]t=[][t.extend(i) ... 阅读全文

posted @ 2015-11-18 08:35 l_g1990 阅读(1078) 评论(0) 推荐(0)

公告