07 2018 档案
摘要：本文内容 涞源于 罗刚 老师的 书籍 << 自己动手写网络爬虫一书 >> ; 本文将介绍 1: 网络爬虫的是做什么的? 2: 手动写一个简单的网络爬虫; 1: 网络爬虫是做什么的? 他的主要工作就是 跟据指定的url地址 去发送请求,获得响应, 然后解析响应 , 一方面从响应中查找出想要查找的数据,
阅读全文
摘要：项目中需要用到联合唯一索引: 例如:有以下需求:每个人每一天只有可能产生一条记录:处了程序约定之外,数据库本身也可以设定: 例如:user表中有userID,userName两个字段,如果不希望有2条一模一样的记录,需要给user表添加多个字段的联合唯一索引: alter table user ad
阅读全文
摘要：在测试环境定位问题时，如果发现日志文件内容太多或太大，有时需要删除该日志，如Tomcat，Nginx日志。以前每次都是先rm -rf ***.log，然后重启应用。直到后来发现了以下命令，原来可以不用重启应用直接清空日志。最简单的方式直接运行以下命令： >file.log 其他两种方式: echo
阅读全文
摘要：使用场景,在做全国各省ip访问统计时要将sparkStreaming的数据存在mysql中,按照一般设计,id,province,counts,time,这样就需要每次清空表,但是如果多分区的话就存在删除表的时候回出现后一个分区可能把前一个分区的数据删除掉,当然最好的办法是每次都只更新而不删除,但是
阅读全文
摘要：跨域问题是开发时必需要解决的问题,而对于SpringBoot如何进行快速配置以达到跨域支持的目的呢? 前言： 当它请求的一个资源是从一个与它本身提供的第一个资源的不同的域名时，一个资源会发起一个跨域HTTP请求(Cross-site HTTP request)。比如说，域名A ( http://do
阅读全文