03 2021 档案

基于python 利用pyecharts作图，实现图表随数据变化实时更新
摘要：利用vue和echarts可以设置定时获取数据渲染页面，但pyecharts做的图在前端页面上为JS中的一个对象数据，（利用Python搭建服务器定时返回新作的图表太麻烦目前不想这样做），那位大神有好办法不妨告知。。。 目前采用定时修改pyecharts图表对象的属性值，在渲染页面： 代码如下 <! 阅读全文
posted @ 2021-03-31 16:23 旁人怎会懂 阅读(4018) 评论(0) 推荐(0)
验证已建立的tf-idf(TfidfVectorizer)模型对新文本进行量化的过程
摘要：from sklearn.feature_extraction.text import TfidfVectorizer test_a = ['天天 爱 LOL', '爱 玩 游戏', '我 是 男生', '男生 ', '爸爸 也 爱 玩 lol' ] tf = TfidfVectorizer() p 阅读全文
posted @ 2021-03-29 18:22 旁人怎会懂 阅读(252) 评论(0) 推荐(0)
算法模型保存与使用
摘要：在算法建立模块中进行模型保存 模型保存如下： import joblib counter = joblib.load('counter_model') # 加载已建立好的词袋模型 nb = joblib.load('nb_model') # 加载已建立好的算法模型 def new_text_pre( 阅读全文
posted @ 2021-03-29 17:45 旁人怎会懂 阅读(303) 评论(0) 推荐(0)
基于tf-idf的文本分类预测模型
摘要：为以后项目准备，在此写一下文本分类预测模型的完整流程，使用的多项式朴素贝叶斯算法进行预测，在其他人项目中看到使用前馈神经网络进行预测（本人目前没有使用过深度学习进行文本分类，不知道效果怎么样） 目前有2个问题未解决 模型建立完，怎样预测一个新的文本文件（词频向量化无法处理）？ 解决方案：目前使用通过 阅读全文
posted @ 2021-03-29 16:30 旁人怎会懂 阅读(990) 评论(0) 推荐(0)
arrow时间处理模块
摘要：数据分析时间序列处理或其他时间处理中使用 阅读全文
posted @ 2021-03-22 22:45 旁人怎会懂 阅读(24) 评论(0) 推荐(0)
pandas 行列转换
摘要：针对pandas数据行列转换问题分类及解决方法，参考原博客，其作者写的非常好，忍不住点赞--（https://www.cnblogs.com/traditional/p/11967360.html），在总结一下，方便使用。 #1. 行转列 原数据 转换后 解决方法：方法1）pd.pivot(df, 阅读全文
posted @ 2021-03-14 22:35 旁人怎会懂 阅读(4065) 评论(1) 推荐(0)
gerapy+scrapyd 爬虫项目部署
摘要：爬虫项目部署 部署环境 ： linux+python3+scrapy+scrapyd+gerapy 介绍： Scrapy：是一个基于Twisted的异步IO框架，有了这个框架，我们就不需要等待当前URL抓取完毕之后在进行下一个URL的抓取，抓取效率可以提高很多。 Scrapy-redis：虽然Scr 阅读全文
posted @ 2021-03-05 09:34 旁人怎会懂 阅读(229) 评论(0) 推荐(0)