一个完整的大作业

摘要： 爬取的网站：https://www.douban.com/group/explore/fashion 遇到的问题：'UCS-2' codec can't encode characters in position 175-175 解决办法： 词云图： 结果分析：可以看出女性在这里占的比例是很高的，讨 阅读全文
posted @ 2017-10-30 18:48 33陈思远 阅读(333) 评论(0) 推荐(0)

数据结构化与保存

摘要： 1.结构化： 单条新闻的详情字典：news 一个列表页所有单条新闻汇总列表：newsls.append(news) 所有列表页的所有新闻汇总列表：newstotal.extend(newsls) 2.转换成pandas的数据结构DataFrame 3.从DataFrame保存到excel 4.从Da 阅读全文
posted @ 2017-10-19 18:50 33陈思远 阅读(129) 评论(0) 推荐(0)

爬取所有校园新闻

摘要： 1.获取单条新闻的#标题#链接#时间#来源#内容 #点击次数，并包装成一个函数。 2.获取一个新闻列表页的所有新闻的上述详情，并包装成一个函数。 3.获取所有新闻列表页的网址，调用上述函数。 4.完成所有校园新闻的爬取工作。 阅读全文
posted @ 2017-10-12 15:13 33陈思远 阅读(182) 评论(0) 推荐(0)

用requests库和BeautifulSoup4库爬取新闻列表

摘要： import requests from bs4 import BeautifulSoup from datetime import datetime wangzhan='http://news.gzcc.cn/html/xiaoyuanxinwen/' res =requests.get(wangzhan) res.encoding='utf-8' soup=BeautifulSoup(re... 阅读全文
posted @ 2017-09-28 19:43 33陈思远 阅读(213) 评论(0) 推荐(0)

中文词频统计及词云制作

摘要： 2.中文分词 阅读全文
posted @ 2017-09-25 17:17 33陈思远 阅读(185) 评论(0) 推荐(0)

组合数据类型练习，英文词频统计实例

摘要： 列表实例：由字符串创建一个作业评分列表，做增删改查询统计遍历操作。例如，查询第一个3分的下标，统计1分的同学有多少个，3分的同学有多少个等。 字典实例：建立学生学号成绩字典，做增删改查遍历操作。 阅读全文
posted @ 2017-09-21 21:21 33陈思远 阅读(129) 评论(0) 推荐(0)

字符串操作练习：星座、凯撒密码、99乘法表、词频统计预处理

摘要： 格式化输出：中华人民共和国国内生产总值(GDP)689,136.89亿元(2015年)（千分位、2位小数，浮点数） 阅读全文
posted @ 2017-09-18 16:55 33陈思远 阅读(186) 评论(0) 推荐(0)

条件、循环、函数定义、字符串操作练习

摘要： 循环画五角星import turtle turtle.color("yellow") turtle.fillcolor("yellow") turtle.begin_fill() for i in range(5): turtle.forward(100) turtle.right(144) turtle.end_fill() 循环画同心圆import turtle fo... 阅读全文
posted @ 2017-09-14 17:53 33陈思远 阅读(133) 评论(0) 推荐(0)

Python输入输出练习，运算练习，turtle初步练习

摘要： print('Hello World！') name=input('输入姓名') print('%s同学，你好'%name) print('和=',int(input('数字a='))+int(input('数字b='))) 三角新面积a=input('三角形的边a=') b=input('三角形的边b=') c=input('三角形的边c=') p=(float(a)+float(... 阅读全文
posted @ 2017-09-07 19:58 33陈思远 阅读(179) 评论(0) 推荐(0)

了解大数据

摘要： 共享经济，一般是指以获得一定报酬为主要目的，基于陌生人且存在物品使用权暂时转移的一种新的经济模式。其本质是整合线下的闲散物品、劳动力、教育医疗资源。有的也说共享经济是人们公平享有社会资源，各自以不同的方式付出和受益，共同获得经济红利。 共享经济将成为社会服务行业内最重要的一股力量。在住宿、交通，教育 阅读全文
posted @ 2017-09-04 18:23 33陈思远 阅读(183) 评论(0) 推荐(0)