fake6s

摘要： 趋势特征是业务人员比较青睐的特征，其中涉及到连续变化期数，例如连续增大、减少期数等。这里写一下可以实现的思路。 1.使用变量 这个方法在我常用的sql平台中只有mysql支持。pgsql和hive无法实现。 在查询里声明select @var:=0,通过逻辑语句将起始位置置1，连续行处递增，和结束位 阅读全文

摘要： 面试的时候被问到过拟合怎么处理，没有好好准备结果这个简单的问题没答上来，我头脑第一个想的是决策树--过拟合--剪枝。笑死，这个回答相当于100分的问题我就会3分，不被白眼才怪，没有系统的认知体系。因此今天要争取整理出一个60+分的答案哈哈 # 1.什么是过拟合 还没找到很标准的话来定义他，但是用图比 阅读全文

摘要： 絮絮叨的前言 去年开始琢磨股票了，作为一个数据富集的事情，自然要掌握更多的数据。 不过看盘研究盘面时候却容易犯懒。 有个想法，每天用邮件推送一点收盘的总结数据，在下班路上打开瞅瞅。 写了一年sql，这不又捡起python整个活 干活用的代码 网上使用python发送邮件的教程不少，这里主要参考了菜鸟 阅读全文

摘要： 描述 在做考勤方面的数据分析时，需要区分工作日和法定节假日。只凭SQL的运算无法达成目的。 只能从网上获取节假日表 这里写了一段python来实现从网上下载节假日表上传到数据库这个功能，要求数据库服务器能连接互联网。 详情 # -*- coding: utf-8 -*- """ Created on 阅读全文

摘要： 博客园的首页可定制性相当高，在浏览时常常被其他大拿的炫酷页面震惊到，自己去翻设置项发现都平平淡淡，满足不了自己追求刺激的心。 这里有一个非常不错、美观的博客园主题，效果如下： 美观又雅致。 该主题是BNDONG大拿的作品。 安装方法已整理好，点此链接安装配置. 阅读全文

摘要： 描述 本文归纳数据清洗后到建模前的工作内容。随着阅读量和工作经验的增加慢慢扩充积累 在数据清洗结束后，要着手分析各项特征，进行筛选建模。特征的分析和筛选是建模工作中最繁杂、工作量最高的环节。 在sklearn的apifeature_selection中有很多通识方法，此外在部分模型如随机森林中集成有 阅读全文

摘要： 描述 mysql中，将每组数据的某一列拼接、压缩成一行 方法 聚合函数group_concat() 详细用法参见这篇文章：MySQL GROUP_CONCAT函数介绍 特别的，仿照一个像是sum()，distinct()等聚合函数的写法即可。不多赘述 阅读全文

摘要： 描述 有时在做查询时，会碰到需要行号的情况。不同于oralce有rownum，mysql自身不具有行号可供使用。 方法 这里推荐此篇文章：Mysql中获取行号 仿写 select (@id:=@id+1) id, day_id from tmp_calendar,(select @id:=0) a 阅读全文

摘要： 描述 功能要求和以前的一片文章类似：hive取组内最值 在新的工作环境中，使用的数据库是mysql 5.5版本。不支持开窗函数的使用 因此在解决这个问题的时候需要新的思路。 方法 我最钦佩的方法当属此文：MySQL去重保留最大的那条记录（取最新的记录） 文章使用了自关联的方法。关联条件是组名相等，最 阅读全文

摘要： 目的 echarts在绘制折线图时，图例上总会有一个默认的圆点。如下图： 如何去掉这个圆形呢？ 配置 在图例的配置项里，设置itemStyle的opacity为0即可。 legend |__data |__itemStyle |__opacity:0 注意，itemStyle是图例图形的配置项。li 阅读全文