2017 年 8月随笔档案 - 大漠之烟

nginx: error while loading shared libraries: libGeoIP.so.1

摘要：wget http://geolite.maxmind.com/download/geoip/api/c/GeoIP.tar.gz wget http://geolite.maxmind.com/download/geoip/database/GeoLiteCity.dat.gz wget http 阅读全文

posted @ 2017-08-29 17:53 大漠之烟阅读(2278) 评论(0) 推荐(0)

数据挖掘---NLP文本相似度

该文被密码保护。

posted @ 2017-08-29 16:15 大漠之烟阅读(3) 评论(0) 推荐(0)

python之常用模块

摘要：本节大纲：本节大纲：模块介绍 time &datetime模块 random os sys shutil json & picle shelve xml处理 yaml处理 configparser hashlib subprocess logging模块 re正则表达式模块，用一砣代码实现了某阅读全文

posted @ 2017-08-28 16:52 大漠之烟阅读(123) 评论(0) 推荐(0)

python 正则

摘要：上面的第2 和第3行也可以合并成一行来写：效果是一样的，区别在于，第一种方式是提前对要匹配的格式进行了编译（对匹配公式进行解析），这样再去匹配的时候就不用在编译匹配的格式，第2种简写是每次匹配的时候都要进行一次匹配公式的编译，所以，如果你需要从一个5w行的文件中匹配出所有以数字开头的行，建议阅读全文

posted @ 2017-08-28 16:44 大漠之烟阅读(119) 评论(0) 推荐(0)

python 二分法例子及冒泡排序

摘要：冒泡排序：阅读全文

posted @ 2017-08-28 15:12 大漠之烟阅读(280) 评论(0) 推荐(0)

python 基础之第十三天（xineted服务器，forking,多线程）

摘要：阅读全文

posted @ 2017-08-28 14:26 大漠之烟阅读(284) 评论(0) 推荐(0)

python 基础之第十二天（re正则，socket模块）

摘要：In [22]: m = re.search('(to)mo(rr)ow','I will see you tomorrow') In [23]: m.groups() Out[23]: ('to', 'rr') In [33]: m.group(1) Out[33]: 'to' In [34]: 阅读全文

posted @ 2017-08-23 16:32 大漠之烟阅读(311) 评论(0) 推荐(0)

python获取系统信息psutil

摘要：python获取系统信息psutil：psutil获取系统cpu使用率的方法是cpu_percent(),其有两个参数，分别是interval和percpu,interval指定的是计算cpu使用率的时间间隔，percpu则指定是选择总的使用率还是每个cpu的使用率。 psutil psutil是p 阅读全文

posted @ 2017-08-21 18:20 大漠之烟阅读(849) 评论(0) 推荐(0)

python 基础之第十一天（面向对象）

摘要：#############面向对象##################### 类： In [4]: MyClass.pstar(a) ##### ******************** #####################类的组合########################### 效果：阅读全文

posted @ 2017-08-21 17:08 大漠之烟阅读(246) 评论(0) 推荐(0)

python 基础之第十天（闭包，装饰器，生成器，tarfile与hashlib模块使用）

摘要：局部变量与全局变量局部变量：在函数里面定义的，只有当函数活动时才生效全局变量：不在函数里面的 ######################################################################## 有个需求：x,y 的和，x一直都是10，每次调用都要输入阅读全文

posted @ 2017-08-16 18:28 大漠之烟阅读(181) 评论(0) 推荐(0)

python 基础之第九天

摘要：###############错误和异常######################## 说明：e 是错误的具体原因，else 表示没有异常才会执行else的语句，finally 是无乱有没异常都要执行 raise 自定义触发异常 assert 断言异常，assert 后面的为真，这句话没有意义，不阅读全文

posted @ 2017-08-16 09:47 大漠之烟阅读(180) 评论(0) 推荐(0)

python 基础之第八天--字典相关

摘要：zx #####################创建字典###################################### In [20]: {}.fromkeys(['bob','herry','jerry'],7) ##不同的key,相同的值，‘7’为值value Out[20]: { 阅读全文

posted @ 2017-08-11 17:06 大漠之烟阅读(215) 评论(0) 推荐(0)

python print 字体颜色

摘要：例子： print '\033[35;43m(1)ip转换成数字\033[0m' \033[35;43m >35列属于字颜色，43列属于背景颜色字背景颜色范围: 40--49 40: 黑 41:红 42:绿 43:黄 44:蓝 45:紫 46:深绿 47:白色字颜色: 30--39： 30: 黑阅读全文

posted @ 2017-08-11 11:42 大漠之烟阅读(1989) 评论(0) 推荐(0)

Python ip与数字的转换方式

摘要：例子：IP:192.168.1.10 方法一： In [1]: bin(192)Out[1]: '0b11000000' In [2]: bin(168)Out[2]: '0b10101000' In [4]: bin(1)Out[4]: '0b1' In [5]: bin(10) Out[5]: 阅读全文

posted @ 2017-08-11 10:35 大漠之烟阅读(3020) 评论(0) 推荐(0)

从零开始日志分析实战包括集群搭建及代码实现

该文被密码保护。

posted @ 2017-08-10 18:14 大漠之烟阅读(2) 评论(0) 推荐(0)

新手学些大数据的好帖子

该文被密码保护。

posted @ 2017-08-10 17:17 大漠之烟阅读(0) 评论(0) 推荐(0)

python 基础之第五天

摘要：##################内建函数#################### ###########查看方式具体用法############## ######字符串讲完了，现在开始列表（list）############### 1.list赋值与更新 In [56]: alist = [10 阅读全文

posted @ 2017-08-10 17:16 大漠之烟阅读(222) 评论(0) 推荐(0)

初始化cache_dir(squid)

摘要：sed -i '/adjustFactor/d' /CNCLog/exactTraffic/conf/localTraffic.cfgecho "adjustFactor = '-0.67 -0.67 -0.67 1 1 1'" >> /CNCLog/exactTraffic/conf/localT 阅读全文

posted @ 2017-08-10 09:52 大漠之烟阅读(409) 评论(0) 推荐(0)

flume 配置详解及与kafka结合方式

该文被密码保护。

posted @ 2017-08-09 11:20 大漠之烟阅读(2) 评论(0) 推荐(0)

美团日志收集系统（架构文章）

摘要：https://tech.meituan.com/mt-log-system-arch.html https://tech.meituan.com/tag/%E6%97%A5%E5%BF%97%E6%94%B6%E9%9B%86 阅读全文

posted @ 2017-08-09 11:10 大漠之烟阅读(1142) 评论(0) 推荐(0)

Using Flume要点(讲解不错，图也画的好，很棒)

该文被密码保护。

posted @ 2017-08-09 10:59 大漠之烟阅读(2) 评论(0) 推荐(0)

kafka和flume的对比

该文被密码保护。

posted @ 2017-08-09 10:42 大漠之烟阅读(0) 评论(0) 推荐(0)

Flume 与Kafka区别

该文被密码保护。

posted @ 2017-08-09 10:38 大漠之烟阅读(0) 评论(0) 推荐(0)

使用 WinSCP（下载）上文件到 Linux图文教程

摘要：问题导读： 1.如何远程链接？ 2.如何上传文件？ 3.如何对立面的文件进行操作？ 4.什么情况下会链接失败？ https://yunpan.cn/cYWtNMycjeVPv 访问密码 4f74 Linux上经常会经常需要编辑文件，特别是Linux VPS/服务器安装好系统之后配置环境会需要修改很多阅读全文

posted @ 2017-08-08 18:12 大漠之烟阅读(1451) 评论(0) 推荐(0)

kafka 与flume结合简单案例

该文被密码保护。

posted @ 2017-08-08 16:54 大漠之烟阅读(1) 评论(0) 推荐(0)

linux安装flume及问题

摘要：验证是否安装成功: [root@master conf]# /usr/local/src/apache-flume-1.6.0-bin/bin/flume-ng versionError: Could not find or load main class org.apache.flume.tool 阅读全文

posted @ 2017-08-08 15:05 大漠之烟阅读(1786) 评论(0) 推荐(0)

kafka

该文被密码保护。

posted @ 2017-08-08 10:28 大漠之烟阅读(8) 评论(0) 推荐(0)

https证书自签

摘要：https http over ssl = https 443/tcp ssl: v3 tls: v1 https:// SSL会话的简化过程 (1) 客户端发送可供选择的加密方式，并向服务器请求证书； (2) 服务器端发送证书以及选定的加密方式给客户端； (3) 客户端取得证书并进行证书验正：如阅读全文

posted @ 2017-08-03 18:06 大漠之烟阅读(1349) 评论(0) 推荐(0)

python 基础之第四天

摘要：例子1：打印列表每个元素对应的索引 [root@master script]# vim suoyin.py #!/usr/bin/python# coding:utf-8 alist = ['fu','shan','hua','hive'] #for i in range(len(alist)): 阅读全文

posted @ 2017-08-03 18:04 大漠之烟阅读(227) 评论(0) 推荐(0)

python 基础之第三天

摘要：例子1：8位数的随机密码验证：改进版： In [3]: string.printableOut[3]: '0123456789abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ!"#$%&\'()*+,-./:;<=>?@[\\]^_`{|} 阅读全文

posted @ 2017-08-02 18:18 大漠之烟阅读(171) 评论(0) 推荐(0)

python 爬虫

摘要：阅读全文

posted @ 2017-08-02 17:10 大漠之烟阅读(109) 评论(0) 推荐(0)

算法学习列表地址

该文被密码保护。

posted @ 2017-08-02 14:41 大漠之烟阅读(0) 评论(0) 推荐(0)

Flume NG 学习笔记（十） Transaction、Sink、Source和Channel开发

该文被密码保护。

posted @ 2017-08-02 14:37 大漠之烟阅读(0) 评论(0) 推荐(0)

Flume NG 学习笔记（九）Flune Client 开发

该文被密码保护。