一个完整的大作业

摘要: 爬取的网站:https://www.douban.com/group/explore/fashion 遇到的问题:'UCS-2' codec can't encode characters in position 175-175 解决办法: 词云图: 结果分析:可以看出女性在这里占的比例是很高的,讨 阅读全文
posted @ 2017-10-30 18:48 33陈思远 阅读(309) 评论(0) 推荐(0) 编辑

数据结构化与保存

摘要: 1.结构化: 单条新闻的详情字典:news 一个列表页所有单条新闻汇总列表:newsls.append(news) 所有列表页的所有新闻汇总列表:newstotal.extend(newsls) 2.转换成pandas的数据结构DataFrame 3.从DataFrame保存到excel 4.从Da 阅读全文
posted @ 2017-10-19 18:50 33陈思远 阅读(120) 评论(0) 推荐(0) 编辑

爬取所有校园新闻

摘要: 1.获取单条新闻的#标题#链接#时间#来源#内容 #点击次数,并包装成一个函数。 2.获取一个新闻列表页的所有新闻的上述详情,并包装成一个函数。 3.获取所有新闻列表页的网址,调用上述函数。 4.完成所有校园新闻的爬取工作。 阅读全文
posted @ 2017-10-12 15:13 33陈思远 阅读(175) 评论(0) 推荐(0) 编辑

用requests库和BeautifulSoup4库爬取新闻列表

摘要: import requests from bs4 import BeautifulSoup from datetime import datetime wangzhan='http://news.gzcc.cn/html/xiaoyuanxinwen/' res =requests.get(wangzhan) res.encoding='utf-8' soup=BeautifulSoup(re... 阅读全文
posted @ 2017-09-28 19:43 33陈思远 阅读(202) 评论(0) 推荐(0) 编辑

中文词频统计及词云制作

摘要: 2.中文分词 阅读全文
posted @ 2017-09-25 17:17 33陈思远 阅读(163) 评论(0) 推荐(0) 编辑

组合数据类型练习,英文词频统计实例

摘要: 列表实例:由字符串创建一个作业评分列表,做增删改查询统计遍历操作。例如,查询第一个3分的下标,统计1分的同学有多少个,3分的同学有多少个等。 字典实例:建立学生学号成绩字典,做增删改查遍历操作。 阅读全文
posted @ 2017-09-21 21:21 33陈思远 阅读(124) 评论(0) 推荐(0) 编辑

字符串操作练习:星座、凯撒密码、99乘法表、词频统计预处理

摘要: 格式化输出:中华人民共和国国内生产总值(GDP)689,136.89亿元(2015年)(千分位、2位小数,浮点数) 阅读全文
posted @ 2017-09-18 16:55 33陈思远 阅读(177) 评论(0) 推荐(0) 编辑

条件、循环、函数定义、字符串操作练习

摘要: 循环画五角星import turtle turtle.color("yellow") turtle.fillcolor("yellow") turtle.begin_fill() for i in range(5): turtle.forward(100) turtle.right(144) turtle.end_fill() 循环画同心圆import turtle fo... 阅读全文
posted @ 2017-09-14 17:53 33陈思远 阅读(121) 评论(0) 推荐(0) 编辑

Python输入输出练习,运算练习,turtle初步练习

摘要: print('Hello World!') name=input('输入姓名') print('%s同学,你好'%name) print('和=',int(input('数字a='))+int(input('数字b='))) 三角新面积a=input('三角形的边a=') b=input('三角形的边b=') c=input('三角形的边c=') p=(float(a)+float(... 阅读全文
posted @ 2017-09-07 19:58 33陈思远 阅读(172) 评论(0) 推荐(0) 编辑

了解大数据

摘要: 共享经济,一般是指以获得一定报酬为主要目的,基于陌生人且存在物品使用权暂时转移的一种新的经济模式。其本质是整合线下的闲散物品、劳动力、教育医疗资源。有的也说共享经济是人们公平享有社会资源,各自以不同的方式付出和受益,共同获得经济红利。 共享经济将成为社会服务行业内最重要的一股力量。在住宿、交通,教育 阅读全文
posted @ 2017-09-04 18:23 33陈思远 阅读(175) 评论(0) 推荐(0) 编辑