markLogZhu

摘要： 一、介绍 1.1 背景 项目中地区基础数据从上线后再也没有更新过，与目前的国家地区数据不一致，需要做同步操作。 1.2 解决方案 通过采用爬虫手段从 国家统计局官网 抓取数据做同步。 采用 WebMagic 框架实现操作 二、操作 2.1 创建本地临时表 CREATE TABLE `ba_regio 阅读全文