摘要: 1 使用@RunWith(SpringJUnit4ClassRunner.class)进行单元测试时,需要junit高版本和spring-test的高版本才支持,junit需要4.0以上的,spring-test也需要高版本,最开始我用的4.3.13的,翻开jar包发现并没有编写SpringJUni 阅读全文
posted @ 2018-03-10 20:49 宇宙间的星河集 阅读(1380) 评论(0) 推荐(0) 编辑
摘要: 今天在学习springmvc的校验时,遇到了CustomValidationMessages.properties配置文件的信息,才错误提示时是乱码的问题;在网上找了很多方法都没解决;最后原来是在配置校验器的时候忘记指定了编码格式,如果不指定,那么就会产生乱码。 在springmvc.xml的校验器 阅读全文
posted @ 2018-03-07 15:54 宇宙间的星河集 阅读(1517) 评论(0) 推荐(0) 编辑
摘要: <!-- flowchart 箭头图标 勿删 --> 这篇文章将讲解如何爬取知乎上面的问答数据。 首先,我们需要知道,想要爬取知乎上面的数据,第一步肯定是登录,所以我们先介绍一下模拟登录: 先说一下我的思路: 1.首先我们需要控制登录的入口,重写start_requests方法。来控制到这个入口之后 阅读全文
posted @ 2017-12-23 17:42 宇宙间的星河集 阅读(441) 评论(0) 推荐(0) 编辑
摘要: mysql表的结构 数据(数据是通过爬虫得来的,本篇文章不介绍怎么爬取数据,只介绍将数据库中的数据可视化): 下面就是写代码了: 首先看一下项目目录: 数据库层 业务逻辑层 package dao; import java.sql.ResultSet;import java.sql.SQLExcep 阅读全文
posted @ 2017-12-03 19:16 宇宙间的星河集 阅读(931) 评论(1) 推荐(0) 编辑
摘要: 本篇文章将从搭建虚拟环境开始,爬取伯乐在线上的所有文章的数据。 搭建虚拟环境之前需要配置环境变量,该环境变量的变量值为虚拟环境的存放目录 1. 配置环境变量 2.创建虚拟环境 用mkvirtualenv命令进行创建,--python后面加上python的安装目录,可以选择不同版本的python.这也 阅读全文
posted @ 2017-12-03 10:34 宇宙间的星河集 阅读(277) 评论(0) 推荐(0) 编辑
摘要: 错误1:在执行 scrapy crawl spider名命令的时候 出现了ImportError:DLL load failed: %1不是有效的win32程序错误 这是因为pywin32的版本安装错误。 因为我电脑是64位的 。最开始安装了pywin32-221.win-amd64-py3.6这个 阅读全文
posted @ 2017-11-25 16:52 宇宙间的星河集 阅读(233) 评论(0) 推荐(0) 编辑
摘要: 如何将mysql数据库中的方式通过echarts可视化呢,以下面这个简单的例子向大家进行演示: 步骤一:mysql的创表和插入数据,当然这些数据也可以是你通过爬虫抓取的。 步骤二: 创建实体类, 步骤三:通过java连接数据库 将连接数据库所需的jar包,导入WEB-INF下的lib目录下: pac 阅读全文
posted @ 2017-11-21 13:50 宇宙间的星河集 阅读(5251) 评论(1) 推荐(0) 编辑