摘要： 例会照片 任务更新 |姓名|今日完成任务|明日任务|预计花费时间| | | | | | |谢振威|提取html内容并排版| 4 提取html更多信息|4h| |杨金键|处理html并且有一定效果| 5 尝试如何提高 并且准备看别的格式信息提取|8h| |谷大鑫|定义处理完成后数据格式以及上传到sol 阅读全文

摘要： 每日任务内容： 每日任务内容： 姓名 今日任务 明日安排 金豪 文件规格说明以及架构规划 完善软件设计架构 敲定细节 谷大鑫 编写数据处理完成后上传到solr服务区上的程序 编写数据处理程序，阅读上一届代码并整合以适应我们的接口 杨金键 效果并不理想，实现麻烦，经过知道计划改用现成的库 尝试用现成的 阅读全文

摘要： 详细技术说明 1. 系统架构概述： 系统主要由两个部分组成: 爬虫数据获取系统以及数据处理系统 爬虫数据处理就是一个依据源节点网页开展广义优先搜索，定向的查找关键词并且找到文件然后储存在本地，同时将相关信息存入数据库。 数据处理系统是依靠数据库存储信息对于文件进行关键词提取整理筛选然后存入目标数据库 阅读全文

摘要： 之前的分配规则在经过一段时间的使用以及经过老师的提醒之后，暴露出来不少缺陷，所以为了更好的衡量大家的工作，让所有人的工作得到合理的回报，现在采用新的贡献分分配规则，核心思想如下： 一个人在团队中的贡献可以从3方面进行衡量 1. 工作数量（成员在团队项目中所投入的精力） 2. 工作质量（避免低效拖沓， 阅读全文

摘要： 产品规格说明书： 版本号: V2.0 版本说明： 1. 引言 1.1. 编写目的 此规格说明书编写的目的是明确本项目的详细需求，供用户确认项目的功能和性能，和用户形成一致的理解和确认，帮助实际用户以及潜在用户更好的理解本产品，同时也帮助我们在开发过程拥有更加明确的目的。 1.2. 项目背景 项目名称 阅读全文

摘要： 每日任务内容： 每日任务内容： 姓名 今日任务 明日安排 金豪 跟进服务器状态 了解爬虫内部机制 谷大鑫 尝试与爬虫数据库连接并通过阅读代码以及博客获得数据库格式 基本弄清爬虫数据存放位置 完成数据的提取 定义数据库格式，完成处理完成数据上传到在线系统服务器 杨金键 大致了解dll，设计好了html 阅读全文

摘要： 每日任务内容： 每日任务内容： 姓名 今日任务 明日安排 金豪 了解了一些服务器相关知识 跟进服务器状态，解决不能使用的试问 继续学习服务器使用 有空就多读读代码 谷大鑫 编写doc文件从服务器下载到本地的程序 编写doc文件打开并且转为txt的程序 杨金键 仍在探究如何有效的处理数据，对于html 阅读全文

摘要： 每日任务内容： 每日任务内容： 姓名 今日任务 明日安排 金豪 学习solr使用，明确slor非主要学习工具 了解服务器相关知识，为爬虫服务器的掌握做准备 谷大鑫 阅读数据处理代码 总结出来1.翻译文本代码可重用 2. 数据除噪代码可重用 3. 数据处理不支持中文 尝试编写程序从服务器（数据库）中搜 阅读全文

摘要： 成员 当日完成任务 明日安排 金豪 了解solr的基本知识 搭建完成了相关所需要的软件环境 继续学习数据格式类型以及基本的操作方法 杨金键 与另外队伍的PM进行了初步的协商沟通 达成初步共识 阅读学习部分爬虫代码 谢振威 成功尝试登陆代码服务器 对内部代码有了初步的认识 继续深入了解代码内容 崔正龙 阅读全文

摘要： 第三次会议记录 会议议程： 工作回顾： 1. 爬虫方面：爬虫就是一个遍历的过程 可以由多种语言完成，主要涉及一些网络接口的使用，设计网页html读取这样的基本知识 2. 网页方面：学习看html 标签相关，这个一般来说都比较简单。还有高级的一些内容，例如js用于动态网页制作等 3. 服务器相关：主要 阅读全文