11 2020 档案

非正常企业数据续
摘要：第二次改进思路 1、首先对zzsfp表进行数据清洗，去重后得到4223334条数据 2、然后根据nsrxx和上面清洗后的文件连接起来，分离出出销发票表和进购发票表，目的是去除掉那些识别号在企业表中找不到的发票数据 属性列：发票id,购/销识别号,金额,税额 3、把上面两个表都进行根据识别号把金额叠加 阅读全文
posted @ 2020-11-27 22:41 晨起 阅读(87) 评论(0) 推荐(0)
关于根据大数据对非正常企业的判断小结
摘要：一、题目： 数据组成 增值税发票数据，文件名zzsfp 发票对应货物明细数据，文件名zzsfp_hwmx 企业信息，文件名nsrxx 数据字段说明 zzsfp表 字段名称 字段含义 数据类型 备注 fp_nid 发票id String 发票唯一标识 xf_id 销方识别号 String 企业唯一身份 阅读全文
posted @ 2020-11-27 20:58 晨起 阅读(298) 评论(0) 推荐(0)
学习算法
摘要：在完成重大需求项目的统计分析功能模块时，虽然实现了分类查询和统计查询的功能但是在代码设计上比较乱和繁琐基本上是一点点调试出来的，复用比较苦难，想在寒假的时候学习一些算法来优化自己在设计代码上的不足，先立个flag。 阅读全文
posted @ 2020-11-25 09:02 晨起 阅读(87) 评论(0) 推荐(0)
大学生消费情况调查
摘要：一、调研背景 大学生作为社会消费的一个特殊群体，有着不同于社会其他消费群体的消费心理和消费行为。随着社会经济的快速发展，大学生消费行为的外部环境也发生了很大的变化，大学生的消费心理与消费行为与之前相比也都有所变化,大学生消费结构差异带来的消费多元化趋势逐步形成。因此关注大学生消费状况，就显得尤为重要 阅读全文
posted @ 2020-11-22 22:42 晨起 阅读(296) 评论(0) 推荐(0)
篮球网页设计
摘要：今天和昨天开始B/S架构界面设计作业，也就是完成一个网页设计。我想着先做个基础的框架等寒假有时间在完善，用于下一次的网页设计大赛。 遇到的问题，我在百度找的关于篮球照片大都不尽人意，于是我就去ins上找，麻烦死了太难找了，而且图片下载有限制。于是我想说有时间学个爬取ins的教程。 阅读全文
posted @ 2020-11-21 11:52 晨起 阅读(321) 评论(0) 推荐(0)
Ubuntu 16.04安装mysql
摘要：参考博客: https://blog.csdn.net/weixin_43943841/article/details/102969825 https://blog.csdn.net/qq_25333021/article/details/108301367 Ubuntu的软件源换为国内的要不然su 阅读全文
posted @ 2020-11-11 11:09 晨起 阅读(145) 评论(0) 推荐(0)
jupyterLab学习第五天
摘要：前面爬取了拉勾网的信息，然后想继续类别拓展试着去爬取别的网址，于是选择了爬取去哪儿的自由行 首先是进行网页的分析 经过对比hotel.json包含了页面的20个酒店信息，而shopping16049736136513907.json只有列表中第一个酒店的信息，可知我们要爬取的是hotel.json 阅读全文
posted @ 2020-11-10 14:46 晨起 阅读(172) 评论(0) 推荐(0)
jupyterLab学习第四天-爬取拉钩网数据代码的拆分学习
摘要：我前面的博客爬取第一页信息 现在来学习这部分代码 def main(): url = ' https://www.lagou.com/jobs/positionAjax.json?needAddtionalResult=false' first_page = get_json(url, 1) tot 阅读全文
posted @ 2020-11-09 11:00 晨起 阅读(267) 评论(0) 推荐(0)
周总结——爬取拉勾网数据
摘要：一、爬取进阶-爬取拉勾网数据 .py文件 import requests import math import time import pandas as pd def get_json(url, num): """ 从指定的url中通过requests请求携带请求头和请求体获取网页中的信息, :r 阅读全文
posted @ 2020-11-08 23:49 晨起 阅读(315) 评论(0) 推荐(0)
jupyterLab学习第三天-request的session、cookies初学习和练习
摘要：一、简介： session是一种管理用户状态和信息的机制，与cookie的不同的是，session的数据是保存在服务器端。说的明白点就是session相当于一个虚拟的浏览器，在这个浏览器上处于一种保持登录的状态。 cookie是用来存储一些用户信息以便让服务器辨别用户身份的（大多数需要登录的网站上面 阅读全文
posted @ 2020-11-08 23:09 晨起 阅读(547) 评论(0) 推荐(0)
《软件需求》阅读笔记06和jupyterLab学习第二天
摘要：一、阅读笔记 用户需求拓展：由于开发过程中需求的不断发展与增加，项目往往会落后于计划的进度并超出预算。出现这种情况是因为没有依据对需求的规模和复杂度的实际评估来制定计划，而不断修改需求来是情况变得更糟。问题的责任部分在于用户不断提出修改需求的要求，部分在于开发人员处理这种要求的方式。 有歧义的需求： 阅读全文
posted @ 2020-11-05 21:14 晨起 阅读(124) 评论(0) 推荐(0)
《软件需求》阅读笔记05和jupyterLab学习第一天
摘要：一、阅读笔记 从客户角度审视需求 1、软件客户的需求权利：期望业务分析师使用白己的语言、期望业务分析师了解自己的业务和日标、希望业务分析师用适合的形式记录需求、收到需求实践和交忖物的想关解释、期望有一个彼此尊重的环境、聆听关于需求以及解决方案的建议和替代方案、描述能提高产品易用性的特性、了解调整哪些 阅读全文
posted @ 2020-11-05 20:58 晨起 阅读(206) 评论(0) 推荐(0)
《软件需求》阅读笔记04和anaconda的安装和配置
摘要：一、阅读笔记 许多软件问题都源于收集、记录、协商和修改产品需求过程中的方式不当，包括信息收集方式不正规，没有明确提出想要的功能，假设是未经过沟通的错误假设，需求的定义不够充分，以及未经仔细考虑进行需求变更等。在软件开发中遇到的问题时，人们常常轻率地将其忽略。软件项目中40%~60%的缺陷都是由需求分 阅读全文
posted @ 2020-11-05 20:39 晨起 阅读(159) 评论(0) 推荐(0)
《软件需求》阅读笔记03和mapreduce数据清洗
摘要：一、阅读笔记 软件需求的过程改进纪要使用更多对具体情况有效的方法，又要避免过去曾经带来麻烦的方法。然而，在绩效改进的道路上困难重重，包括岂不是无、来自受影响人群的阻力以及时间不足以进行当前任务之外改进工作所带来的挑战。 过程改进的最终目标是降低软件常见和维护的成本，并由此提高项目交付的价值。要做到这 阅读全文
posted @ 2020-11-05 17:01 晨起 阅读(301) 评论(0) 推荐(1)
day10 echart图表联动+周总结+《软件需求》阅读笔记02
摘要：一、任务要求 实现统计图表的三种图表形式，并实现点击显示符合条件的数据 二、具体实现 1、三种图表形式的切换，设计理念： 首先前端先声明好三个图表的css布局 <div id="main" style="width: 600px;height:352px;margin-top: 30px;margi 阅读全文
posted @ 2020-11-02 23:26 晨起 阅读(249) 评论(0) 推荐(0)