帅超007

2021年6月20日

摘要：新闻文本分类首先需要通过大量的训练之后获得一个存放关键字的表，之后再输入一个新闻内容，通过代码就可以自动判断出这个新闻的类别，我这里是在已经有了新闻文本的关键词表后的处理， # encoding=utf-8 #遍历文件，用ProsessofWords处理文件 from imp import re 阅读全文

posted @ 2021-06-20 21:51 帅超007 阅读(579) 评论(0) 推荐(0)

python导入各种包的方法——2

摘要：最普遍的方法将就是通过语句下载各种需要的包 pip install *****当然有时候我们下载的包的网址是国外的，这样会导致我们下载包的速度很慢所以我们可以在上面语句的后面写上我们需要的各个包的下载网址。比如说百度。阅读全文

posted @ 2021-06-20 21:27 帅超007 阅读(208) 评论(0) 推荐(0)

爬去搜狐新闻历史类

摘要： #-*-coding:utf-8-*- # @Time :2021/4/22 7:08 # @Author:shuaichao # @File :.py # @Software: PyCharm from bs4 import BeautifulSoup #网页解析，获悉数据.231 import 阅读全文

posted @ 2021-06-20 19:57 帅超007 阅读(60) 评论(0) 推荐(0)

2021年6月18日

前端展示

摘要：前端的展示然后是ECCV2018论文信息展示其中通过前面的后端信息整理工作获得的数据在本页面展示其中包括词频的前N个和词云图的展示直接通过文件的读取在和echarts的图表展示进行展示后端向前端传送数据 @app.route('/wordcloud')def skin2(): data = 阅读全文

posted @ 2021-06-18 21:56 帅超007 阅读(171) 评论(0) 推荐(0)

2021年6月16日

热词分析前端设计

摘要：项目选用的是python的flask框架进行设计 flask轻量级框架流程比较简单其中web页面的展示就包括论文的显示 ECCV2018论文信息展示 ICCV2019论文信息展示两年论文信息比对包括四个部分还有一个新闻的主页面我的css模板是运用的黄某人的模板，在此感谢黄某人 CSS文件阅读全文

posted @ 2021-06-16 21:45 帅超007 阅读(114) 评论(0) 推荐(0)

2021年6月3日

爬虫经验总结二

摘要：当通过json爬取数据时会显得相对简单，因为数据是通过键对值进行爬取的，这里面需要注意的是当网页中数据很多并且是动态生成的——比如下拉查看新数据。这些数据都是存放着在json中的，我们需要找到json的网页，然后去掉非法字符使得python可以识别json，然后找到对应的键值进行爬取，在这里面阅读全文

posted @ 2021-06-03 09:13 帅超007 阅读(50) 评论(0) 推荐(0)

爬虫经验总结一

摘要：在爬取数据时有两种主要的方法: 第一种方法是通过标签爬取数据，当想要爬取的数据格式相同时用这种方法很合适，在爬取新闻数据使用到这种方法时，需要注意的是新闻页面驳杂，有些是新闻子页，有一些是广告子页，还有很多是图片为主的新闻子页，遇到这种情况按照情况爬取自新闻面链接，通过观察发现正常的新闻子页的链阅读全文

posted @ 2021-06-03 09:09 帅超007 阅读(87) 评论(0) 推荐(0)

爬取搜狐新闻科技类

摘要： #-*-coding:utf-8-*- # @Time :2021/4/22 7:08 # @Author:shuaichao # @File :.py # @Software: PyCharm from bs4 import BeautifulSoup #网页解析，获悉数据.231 import 阅读全文

posted @ 2021-06-03 08:56 帅超007 阅读(140) 评论(0) 推荐(0)

爬取搜狐新闻金融类

摘要： #-*-coding:utf-8-*- # @Time :2021/4/22 7:08 # @Author:shuaichao # @File :.py # @Software: PyCharm from bs4 import BeautifulSoup #网页解析，获悉数据.231 import 阅读全文

posted @ 2021-06-03 08:54 帅超007 阅读(111) 评论(0) 推荐(0)

爬取搜狐新闻时尚类

摘要： #-*-coding:utf-8-*- # @Time :2021/4/17 14:58 # @Author:shuaichao # @File :.py # @Software: PyCharm import gzip from bs4 import BeautifulSoup #网页解析，获悉数阅读全文

posted @ 2021-06-03 08:53 帅超007 阅读(68) 评论(0) 推荐(0)

公告