会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
markLogZhu
博客园
首页
新随笔
管理
2020年8月25日
抓取国家地区基础数据
摘要: 一、介绍 1.1 背景 项目中地区基础数据从上线后再也没有更新过,与目前的国家地区数据不一致,需要做同步操作。 1.2 解决方案 通过采用爬虫手段从 国家统计局官网 抓取数据做同步。 采用 WebMagic 框架实现操作 二、操作 2.1 创建本地临时表 CREATE TABLE `ba_regio
阅读全文
posted @ 2020-08-25 09:33 MarkLogZhu
阅读(418)
评论(0)
推荐(0)
编辑