我的Github:   Github
摘要: 为了让绝大多数人都可以看懂,所以我就用简单的话语来讲解机器学习每一个算法 第一次写ML的博文,所以可能会有些地方出错,欢迎各位大佬提出意见或错误 祝大家开心进步每一天~ 博文代码全部为python 简单的说一下什么是机器学习,机器学习英文名称是Machine Learning, ML 机器学习(Ma 阅读全文
posted @ 2017-06-19 00:58 寂夜云 阅读(550) 评论(0) 推荐(0) 编辑
摘要: 基于gevent(协程),抓取站点的所有url 说到协程,协程不是进程或线程,其执行过程更类似于子例程,或者说不带返回值的函数调用。 协程在执行过程中遇到阻塞时转而执行别的子程序,阻塞结束后再返回来接着执行。 在gevent里面,上下文切换是通过yielding来完成的 代码中用到requests, 阅读全文
posted @ 2017-05-18 17:47 寂夜云 阅读(1388) 评论(0) 推荐(0) 编辑
摘要: 一、spark安装 因为之前安装过hadoop,所以,在“Choose a package type”后面需要选择“Pre-build with user-provided Hadoop [can use with most Hadoop distributions]”,然后,点击“Download 阅读全文
posted @ 2017-05-02 17:27 寂夜云 阅读(4785) 评论(0) 推荐(0) 编辑
摘要: 上传hive软件包到任意节点 一、安装hive软件 解压缩hive软件包到/usr/local/hadoop/目录下 重命名hive文件夹 在/etc/profile文件中添加环境变量 export HIVE_HOME=/usr/local/hadoop/hive export PATH=$HIVE 阅读全文
posted @ 2017-04-27 21:44 寂夜云 阅读(2651) 评论(0) 推荐(0) 编辑
摘要: 1.准备三台虚拟机 2.hadoop+hive+spark+java软件包 传送门:Hadoop官网 Hive官网 Spark官网 一、修改主机名,hosts文件 主机名修改 hostnamectl set-hostname *** hosts文件修改 vi /etc/hosts 写入以下内容 ma 阅读全文
posted @ 2017-04-26 18:54 寂夜云 阅读(3786) 评论(0) 推荐(0) 编辑
摘要: 在这里我一直遇到一个错误点,在下面的代码中来介绍这里我买的蜂鸣器的介绍,其中VCC要接在电源端口,GND接GND,IO就是GPIO这里是运行的python代码import RPi.GPIO as GPIOimport timeaddress_gpio = 7 #这里代表的是GPIO... 阅读全文
posted @ 2015-12-26 19:04 寂夜云 阅读(4039) 评论(0) 推荐(0) 编辑
摘要: 在这里先说一下最开始所经历的一些错误app=Flask(_name_),当初拼写的时候怎么都报错后来发现此处是两个'_'配置文件app.config.from_object(__name__) 在当前文件中查询配置项app.config.from_envvar('FLASKR_SETTINGS',... 阅读全文
posted @ 2015-12-24 21:11 寂夜云 阅读(1490) 评论(0) 推荐(0) 编辑
摘要: 主要功能函数sniffsniff(filter="",iface="any",prn=function,count=N)filter参数允许我们对Scapy嗅探的数据包指定一个BPF(Wireshark类型)的过滤器,也可以留空以嗅探所有的数据包。 例如:嗅探所有的HTTP数据包,tcp port... 阅读全文
posted @ 2015-12-02 22:30 寂夜云 阅读(17502) 评论(0) 推荐(0) 编辑
摘要: 内存信息psutil.cpu_times() 使用cpu_times方法获取cpu完整信息,需要显示所有逻辑cpu信息(指定变量percpu=True)psutil.cpu_times().user 获取单项数据信息,如用户user的cpu时间比psutil.cpu_count() 获取... 阅读全文
posted @ 2015-10-29 16:23 寂夜云 阅读(978) 评论(0) 推荐(0) 编辑
摘要: 基本的读取import urllib2http=urllib2.urlopen("http://xxxxx").read().decode('utf-8')使用代理import urllib2proxy=urllib2.ProxyHandler({'http':'http://xxxxxx:xxxx... 阅读全文
posted @ 2015-09-27 20:29 寂夜云 阅读(339) 评论(0) 推荐(0) 编辑