软工新人

摘要： 对于老师要求的第二个个人作业进行完成。 这个作业要求爬取顶会热词，然后生成热词云。 首先是对内容的爬取，由于以前做过爬虫，因此对于文章的爬取就不是很难了，而且没有反爬虫的限制，但是中间会出现断网的情况，我的解决办法就是输出一共爬取了多少条，然后下次就从断网的那里继续爬。 代码如下： import r 阅读全文

摘要： 寻找代码中存在的问题，对软件提出改进意见。 部分工作代码如下： public class Mechangeinf extends AppCompatActivity { String MYID=""; String MYNICHENG=""; String MYQIANMING=""; String 阅读全文

摘要： 对已完成的代码检查并进行优化。 已经完成了大部分的工作，现在要做的就是对代码的检查和修改，发现其中的问题。 工作中的部分代码如下： public class firstFragment extends Fragment { private ProgressDialog progressDialog; 阅读全文

摘要： 将在自己 电脑上的项目打包复制到云服务器上，然后将云服务器的mysql表进行创建用来避免错误的出现，在这一过程中还是出现了问题，经过反复测试终于解决问题，已经可以实现在自己的手机上访问到软件。 支持外网访问，也就是可以在自己的手机端运行，满足用户的使用要求。 工作中的部分代码如下： public c 阅读全文

摘要： 将数据导入到云服务器的mysql中，云服务器不适合用来执行python爬虫代码。 现在自己的电脑上爬取数据，然后利用可视化软件导出数据为sql文件，然后将文件放到云服务器的数据库中，云服务器不适合在配置python环境，这样做也能使工作简单写。 阅读全文

摘要： 爬取到了帖子的标题，还要对帖子的评论进行爬取，这其中就会有更多的服务器访问，因此出现反爬虫设定的概率就更大了，因此决定控制过一段时间进行一次爬虫，每个帖子不要爬取过多的内容，以此来保证可以让数据库不会太缺少内容。 应对爬虫出现问题的方法，因为解决不了验证，只能每次爬取少量内容，给程序设置了一个定时器 阅读全文

摘要： 对爬虫代码的测试过程中发现，当爬取的数据过多时会出现错误，然后发现是因为百度贴吧有反爬虫设定，这就导致了无法爬取到过多的内容，如果访问的次数过多就会出现反爬虫，因此再代码的测试上也会出现阻碍，但对与贴吧主页的爬取成功。 在爬取过程中出现的不是验证码，而是一种图片的旋转，通过将图片旋转正了实现验证，我 阅读全文

摘要： 按照老师的要求爬出石家庄铁道大学百度贴吧，对代码进行解析，今天实现了代码的功能，明天对代码进行优化爬取更多。 这里就是对于网页的解析，但是以前做的只是对于数据的读取，还没有做到解析，因此还要学习下html的解析，不过也实现了对于内容的爬取。 阅读全文

摘要： 服务器端的代码也要进行修改，这次给读取数据时加上了条数限制，保证第一次加载只读取数据库中的5条，然后当用户上滑加载的时候再次请求网络，在去读取一条数据，经测试，有效解决了加载缓慢的问题. 这一部分的功能是对以前的的写的方法的修改，因为通过测试发现以前的方法存在设计不当的地方，因此需要对已经写好的部分 阅读全文

摘要： 今天领取到了服务器，由于对linux系统的命令不熟悉，因此选择使用windows系统配置服务器，主要是mysql，Tomcat的配置，这就是上学期的javaweb的运行环境的配置，要做的就是将jdk复制到云服务器，将mysql和Tomcat都复制到云服务器，在上面在安装一遍。今天主要完成了服务器的配 阅读全文