Python学习 - 随笔分类 - 不知道的痛

摘要：问题提出如何创建模型如何结合输入的数据(信息)进行合理的预测课程中是以垃圾邮件分类为案例展开的在训练垃圾分类模型时，我们会提供大量的有标签样本进行创建、学习、预测模型，然后通过无标签样本来预测该样本的标签所属。整个流程大概是这样，然后，什么是样本？标签... 阅读全文

posted @ 2018-09-03 19:43 不知道的痛阅读(179) 评论(0) 推荐(0)

摘要：Sklearn的安装pip install -U scikit-learn前提是要安装好numpy、scipy安装很顺利，但是导入包时报错如下错误提示：numpy、scipy版本不能太旧，有可能和最新的Sklearn包不兼容，导致报错如import skl... 阅读全文

posted @ 2018-08-14 17:07 不知道的痛阅读(762) 评论(0) 推荐(0)

摘要：前言在删除和修改DataFrame中的数据时，IPython报出了这个警告。虽然不影响程序执行，而且记得原来在pycharm下也执行过对df的修改但是没有问题，抱着好奇心去查了一番。内容极其相似，以至于完全是复制粘贴的文章，到处都是，看了一下感觉没道理。报错代码：df... 阅读全文

posted @ 2018-08-04 19:53 不知道的痛阅读(1019) 评论(0) 推荐(0)

摘要：我使用这个函数就是用来清洗数据，删选过滤掉DataFrame中一些行。布尔索引这里你需要知道DateFrame中布尔索引这个东西，可以用满足布尔条件的列值来过滤数据，如下>>> df=pd.DataFrame(np.random.randn(4,4),columns=... 阅读全文

posted @ 2018-05-27 21:12 不知道的痛阅读(1963) 评论(0) 推荐(0)

摘要：本文搜集我学习实战过程中看到的好文，和自己学习总结的一些文章，持续更新数据分析如何入门学习How do I learn data analysis with Python?虽然是英文的，不过看一遍很大收获（可以用百度翻译看一下）Numpy使用快速入门NumpyStac... 阅读全文

posted @ 2018-05-27 20:36 不知道的痛阅读(462) 评论(0) 推荐(0)

摘要：使用Pandas分块处理大文件问题：今天在处理快手的用户数据时，遇到了一个差不多600M的txt文本，用sublime打开都蹦了，我用pandas.read_table()去读，差不多花了近2分钟，最后打开发现差不多3千万行数据。这仅仅是打开，如果要处理不知得多费劲。... 阅读全文

posted @ 2018-05-27 19:37 不知道的痛阅读(425) 评论(0) 推荐(0)

摘要：抓包分析搜索页面影视资源页面5.22更新完善获取百度云，电驴等连接代码实现所需第三方库搜索页面5.22更新解析搜索页链接获取下载页跳转链接获取下载链接5.22更新，增加json文件格式美化转变，显示中文结果最近追剧时发现找资源挺繁琐的，网页切换来切换去耗时也多，所以就... 阅读全文

posted @ 2018-05-20 18:46 不知道的痛阅读(2010) 评论(0) 推荐(0)

摘要：更新：Pandas使用DateFrame串联及附加操作先通过字典创建一个DateFrameimport pandas as pdimport numpy as npdata=dict.fromkeys(['first','second','third'])for i ... 阅读全文

posted @ 2018-03-31 16:03 不知道的痛阅读(474) 评论(0) 推荐(0)

摘要：pandas学习(两种数据结构DataFrame & Series)DataFrame(类似numpy的二维数组，是一种带标签的二维对象)有行索引&列索引(默认从0开始，可根据索引选值) 1. 创建方式：从另一个DataFrame创建从具有二维形状的Numpy数组(或... 阅读全文

posted @ 2018-03-10 15:32 不知道的痛阅读(310) 评论(0) 推荐(0)

摘要：今天在搭建一个虚拟环境过程中，遇到了点问题，在此记录一二。安装完scrapy后，再去安装pywin32，之后再通过命令行调试scrapy项目时，发现任然爆出了如下错误：。。。 import win32apiImportError: DLL load failed... 阅读全文

posted @ 2018-02-26 00:06 不知道的痛阅读(448) 评论(0) 推荐(0)

摘要：在上一篇文章中，谈及了如何使用scrapy取获取网页数据，可参考Scrapy入门学习之初步探索。在此继续谈一下数据保存和一些settings.py的配置。文中会继续上文的豆瓣读书小项目，并新增一个爬取简书所有用户信息的爬虫小项目，文章力求能够讲清学习时所遇到的坑，所以... 阅读全文

posted @ 2018-02-09 23:54 不知道的痛阅读(274) 评论(0) 推荐(0)

摘要：OK，因为数据分析的缘故需要采集一些数据，所以学了一段时间的爬虫，但都是利用urllib，requests，Beautifulsoup采取一些小规模的数据，感觉并不顺手，所以从今天开始进入scrapy框架的学习。事先申明环境配置 win10 python... 阅读全文

posted @ 2018-02-09 02:23 不知道的痛阅读(214) 评论(0) 推荐(0)

摘要：今天上手学习scrapy在建立虚拟环境后，pip安装scrapy出现如下报错： error: command ‘C:\Program Files (x86)\Microsoft Visual Studio 14.0\VC\BIN\x86_amd64\cl.exe’ ... 阅读全文

posted @ 2018-01-26 16:45 不知道的痛阅读(1179) 评论(0) 推荐(0)

不知道的痛