摘要: 1.选一个自己感兴趣的主题。 在爬取时遇到了最大的困难是有些大型网页内容不让爬取,以及大型网页的内容的类不一定会一样,难以批量爬取。 现在爬取的网页信息为http://news.17173.com/ 2.网络上爬取相关的数据。 该游戏新闻中心爬取结果 3.进行文本分析,生成词云。 文本分析 对爬取的 阅读全文
posted @ 2017-11-01 00:25 吴林鸿 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 1.结构化: 单条新闻的详情字典:news 一个列表页所有单条新闻汇总列表:newsls.append(news) 所有列表页的所有新闻汇总列表:newstotal.extend(newsls) 2.转换成pandas的数据结构DataFrame 3.从DataFrame保存到excel 4.从Da 阅读全文
posted @ 2017-10-19 20:54 吴林鸿 阅读(120) 评论(0) 推荐(0) 编辑
摘要: 1.获取单条新闻的#标题#链接#时间#来源#内容 #点击次数,并包装成一个函数。 2.获取一个新闻列表页的所有新闻的上述详情,并包装成一个函数。 3.获取所有新闻列表页的网址,调用上述函数。 4.完成所有校园新闻的爬取工作。 5.完成自己所选其他主题相应数据的爬取工作。 阅读全文
posted @ 2017-10-12 13:21 吴林鸿 阅读(145) 评论(0) 推荐(0) 编辑
摘要: 用requests库和BeautifulSoup4库,爬取校园新闻列表的时间、标题、链接、来源、详细内容。 将其中的时间str转换成datetime类型。 将取得详细内容的代码包装成函数。 from datetime import datetime import requests from bs4 阅读全文
posted @ 2017-09-29 00:20 吴林鸿 阅读(140) 评论(0) 推荐(0) 编辑
摘要: 1.中软国际华南区技术总监曾老师还会来上两次课,同学们希望曾老师讲些什么内容?(认真想一想回答) 大数据会用到哪些技术? 2.中文分词 阅读全文
posted @ 2017-09-25 17:56 吴林鸿 阅读(94) 评论(0) 推荐(0) 编辑
摘要: l=list('1233332121') t=tuple('654321123456') x={'201720':'88','201721':'90','201722':'78'} s=set('123321332122') print("列表:",l) for i in l: print(i,en 阅读全文
posted @ 2017-09-21 15:53 吴林鸿 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 实例:输出12个星座符号,以反斜线分隔。 for i in range(9800,9812): print(chr(i),end='\\') 实例:恺撒密码的编码 plaincode=input('请输入明文:') print('密文:',end='') x=ord('a') y=ord('z') for i in plaincode: if x<= ord(i)<=y:... 阅读全文
posted @ 2017-09-18 17:08 吴林鸿 阅读(113) 评论(0) 推荐(0) 编辑
摘要: 用循环画五角星 import turtle turtle.fillcolor('red') turtle.begin_fill() while True: turtle.forward(200) turtle.left(144) if abs(turtle.pos())<1: break turtle.end_fill() done() 用循环画同心... 阅读全文
posted @ 2017-09-14 14:00 吴林鸿 阅读(87) 评论(0) 推荐(0) 编辑
摘要: import turtle turtle.pensize(2) turtle.setup(600,400,0,0) turtle.color("yellow") turtle.bgcolor('red') turtle.fillcolor("yellow") turtle.up() turtle.goto(-250,100) turtle.down() turtle.begin_fill() f... 阅读全文
posted @ 2017-09-11 17:48 吴林鸿 阅读(108) 评论(0) 推荐(0) 编辑
摘要: 1.Hello World! 2.简单交互(交互式,文件式) 3.用户输入两个数字,计算并输出两个数字之和(尝试用一行代码实现)。 4.用户输入三角形三边长度,并计算三角形的面积:(海伦公式) 5.输入半径,计算圆的面积。 6.画一组同切圆 7.画一个五角星 8.画一个全黄色的五角星 阅读全文
posted @ 2017-09-07 14:28 吴林鸿 阅读(196) 评论(1) 推荐(0) 编辑