随笔分类 -  Python

摘要:clob字段是oracle专门用于存储超长字符串的字段类型,一般varchar2只能存4000个字符串,超过4000个就存不下去了。 如果直接使用 pandas.read_sql(sql, conn)会报错,那么如何将clob读取到python中呢? 1.read方法 import cx_Oracl 阅读全文
posted @ 2019-06-19 19:09 Sunshine168 阅读(6046) 评论(0) 推荐(0)
摘要:重点: cursor这里有个属性:description。获取的是数据库每个栏位(字段,列)情况: (('id', 3, None, 11, 11, 0, False), ('type', 253, None, 5, 5, 0, False) 连接数据库 import pymysql # 连接数据库 阅读全文
posted @ 2019-06-06 17:27 Sunshine168 阅读(2490) 评论(0) 推荐(0)
摘要:原文作者:禅在心中 出处:http://www.cnblogs.com/pinking/ 概率分布有两种类型:离散(discrete)概率分布和连续(continuous)概率分布。 离散概率分布也称为概率质量函数(probability mass function)。离散概率分布的例子有伯努利分布 阅读全文
posted @ 2018-08-21 16:42 Sunshine168 阅读(1732) 评论(0) 推荐(0)
摘要:基本的爬虫工作原理 基本的http抓取工具,scrapy Bloom Filter: Bloom Filters by Example 如果需要大规模网页抓取,你需要学习分布式爬虫的概念。其实没那么玄乎,你只要学会怎样维护一个所有集群机器能够有效分享的分布式队列就好。最简单的实现是python-rq 阅读全文
posted @ 2018-06-29 14:44 Sunshine168 阅读(166) 评论(0) 推荐(0)
摘要:adf检验是用来检验序列是否平稳的方式,一般来说是时间序列中的一种检验方法。python中可使用现成的工具statsmodels来实现adf检验。 方法及参数: ADF检验总结一句话:如果序列是平稳的,则不存在单位根, 否则就会存在单位根。 同时,源数据不平稳(大多肉眼可见),可以做一阶差分、二阶差 阅读全文
posted @ 2018-04-17 11:03 Sunshine168 阅读(13338) 评论(0) 推荐(0)