星*月

摘要： 正则表达式的三个表示重复匹配的元字符： * 匹配前面的子表达式零次或多次，等价于 {0,} + 匹配前面的子表达式一次或多次，等价于 {1,} ？ 匹配前面的子表达式零次或一次，等价于 {0,1} 实例： 匹配字符"1.*3"时，由于贪婪模式的开启，匹配到字符1后，会一直往后匹配任意字符，直到最后， 阅读全文

摘要： 今天使用python爬取了2页天堂图片网的图片并保存到事先准备好的文件夹。网址：https://www.ivsky.com/tupian 下面来讲述一下爬取流程： ①：首先，我们进入天堂图片网，查看每一页图片网址的相同与不同之处，以便我们爬取： 第一页网址如下： 第二页网址如下： 第三页网址如下： 阅读全文

摘要： 今天的历程： 上午：数据可视化：以中国地图展示各省各市的项目总和，直辖市可下钻到县，省可下钻到市。 下午：完成了国民经济行业的规范，并对应补充了其行业代码。 晚上：根据行业分类，完成了省市不同项目类型的数量的可视化，以及京津冀三省市两年部分项目数量的对比。 阅读全文

摘要： 今天完成了提取字符串关键词的这一部分，代码如下： 1 # -*- coding: gbk -*- 2 import jieba.analyse 3 import pymysql 4 5 6 # 打开连接 7 def open_conn(dbname): 8 db = pymysql.connect( 阅读全文

摘要： 今天调用高德地图API利用给定地址获取到了其标准地域纬度（省市县），并对应了其行政区域代码。 但是在这期间也遇到了问题： ①：一开始我是通过API获取给定地址的经纬度，再利用其经纬度从高德地图爬取其省市县标准地域纬度及其行政区域代码 首先获取经纬度： 1 def get_coordinates(ad 阅读全文

摘要： 使用datax将mysql中的数据导入mysql数据库的另一个表时，出现了一个没有见过的错误：java.lang.String cannot be cast to java.util.List 看起来像是类型转换的错误，但是上网查询各种资料后得到的结果是，mysql的reader读取部分的jdbc的 阅读全文

摘要： datax下载地址：https://github.com/alibaba/DataX 下载完后解压，然后自己写json文件，或者去https://github.com/alibaba/DataX/blob/master/introduction.md里面找现成的进行修改。 json文件格式：（以本地 阅读全文

摘要： 下载地址：https://www.elastic.co/cn/downloads/past-releases elasticsearch版本：2.3.5 logstach版本：2.3.4 kibane版本：4.5.4 下载完成后为三个压缩包，解压。 elasticsearch配置： 在cmd中进入刚 阅读全文

摘要： kettle连接mysql报错 网上查询后才知道这是时区的问题，解决方法： 从cmd进入mysql进行操作： 之后成功： 阅读全文

摘要： 1、可用性 刺激源：用户 刺激：大量用户频繁点击、访问页面 制品：服务器 环境：正常环境 响应：页面加载缓慢 响应度量：用户刷新页面 2、可修改性 刺激源：开发者 刺激：系统出现bug 制品：系统 环境：修改系统 响应：对bug进行消除 响应度量：bug消除，其他功能无影响 3、性能 刺激源：大量用 阅读全文