摘要: 面试的时候被问到过拟合怎么处理,没有好好准备结果这个简单的问题没答上来,我头脑第一个想的是决策树--过拟合--剪枝。笑死,这个回答相当于100分的问题我就会3分,不被白眼才怪,没有系统的认知体系。因此今天要争取整理出一个60+分的答案哈哈 # 1.什么是过拟合 还没找到很标准的话来定义他,但是用图比 阅读全文
posted @ 2023-06-14 17:08 菲克纽斯 阅读(42) 评论(0) 推荐(0) 编辑
摘要: 絮絮叨的前言 去年开始琢磨股票了,作为一个数据富集的事情,自然要掌握更多的数据。 不过看盘研究盘面时候却容易犯懒。 有个想法,每天用邮件推送一点收盘的总结数据,在下班路上打开瞅瞅。 写了一年sql,这不又捡起python整个活 干活用的代码 网上使用python发送邮件的教程不少,这里主要参考了菜鸟 阅读全文
posted @ 2023-03-01 15:33 菲克纽斯 阅读(7) 评论(0) 推荐(0) 编辑
摘要: 描述 在做考勤方面的数据分析时,需要区分工作日和法定节假日。只凭SQL的运算无法达成目的。 只能从网上获取节假日表 这里写了一段python来实现从网上下载节假日表上传到数据库这个功能,要求数据库服务器能连接互联网。 详情 # -*- coding: utf-8 -*- """ Created on 阅读全文
posted @ 2022-05-07 17:14 菲克纽斯 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 博客园的首页可定制性相当高,在浏览时常常被其他大拿的炫酷页面震惊到,自己去翻设置项发现都平平淡淡,满足不了自己追求刺激的心。 这里有一个非常不错、美观的博客园主题,效果如下: 美观又雅致。 该主题是BNDONG大拿的作品。 安装方法已整理好,点此链接安装配置. 阅读全文
posted @ 2022-04-08 16:58 菲克纽斯 阅读(46) 评论(0) 推荐(0) 编辑
摘要: 描述 本文归纳数据清洗后到建模前的工作内容。随着阅读量和工作经验的增加慢慢扩充积累 在数据清洗结束后,要着手分析各项特征,进行筛选建模。特征的分析和筛选是建模工作中最繁杂、工作量最高的环节。 在sklearn的apifeature_selection中有很多通识方法,此外在部分模型如随机森林中集成有 阅读全文
posted @ 2022-02-21 23:05 菲克纽斯 阅读(1024) 评论(0) 推荐(0) 编辑
摘要: 描述 mysql中,将每组数据的某一列拼接、压缩成一行 方法 聚合函数group_concat() 详细用法参见这篇文章:MySQL GROUP_CONCAT函数介绍 特别的,仿照一个像是sum(),distinct()等聚合函数的写法即可。不多赘述 阅读全文
posted @ 2022-01-21 11:34 菲克纽斯 阅读(151) 评论(0) 推荐(0) 编辑
摘要: 描述 有时在做查询时,会碰到需要行号的情况。不同于oralce有rownum,mysql自身不具有行号可供使用。 方法 这里推荐此篇文章:Mysql中获取行号 仿写 select (@id:=@id+1) id, day_id from tmp_calendar,(select @id:=0) a 阅读全文
posted @ 2022-01-21 11:00 菲克纽斯 阅读(466) 评论(0) 推荐(0) 编辑
摘要: 描述 功能要求和以前的一片文章类似:hive取组内最值 在新的工作环境中,使用的数据库是mysql 5.5版本。不支持开窗函数的使用 因此在解决这个问题的时候需要新的思路。 方法 我最钦佩的方法当属此文:MySQL去重保留最大的那条记录(取最新的记录) 文章使用了自关联的方法。关联条件是组名相等,最 阅读全文
posted @ 2022-01-21 10:36 菲克纽斯 阅读(61) 评论(0) 推荐(0) 编辑
摘要: 目的 echarts在绘制折线图时,图例上总会有一个默认的圆点。如下图: 如何去掉这个圆形呢? 配置 在图例的配置项里,设置itemStyle的opacity为0即可。 legend |__data |__itemStyle |__opacity:0 注意,itemStyle是图例图形的配置项。li 阅读全文
posted @ 2021-07-23 09:57 菲克纽斯 阅读(3304) 评论(0) 推荐(0) 编辑
摘要: 前因 比较喜欢echarts的绘图风格,想用pyecharts将绘图导入自动化流程。 官方给出的pyecharts导出图片有三种方式: snapshot-selenium snapshot-phantomjs snapshot-pyppeteer 1、3选项和谷歌浏览器绑定。而本人不喜欢谷歌浏览器。 阅读全文
posted @ 2021-07-12 13:58 菲克纽斯 阅读(3497) 评论(1) 推荐(2) 编辑