上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 24 下一页
摘要: 我编写的这个登录来解释安全性。 这个的验证码: package LOGINCODE; import java.awt.Color; import java.awt.Graphics; import java.awt.image.BufferedImage; import java.io.IOExce 阅读全文
posted @ 2020-03-02 16:30 Double晨 阅读(493) 评论(0) 推荐(0) 编辑
摘要: Python正则爬虫 re.findall:搜索字符串,以列表形式返回全部能匹配的字符串。 string="猪 狗 鸡 鸭" #当正则表达式中有两个括号时,其输出是一个list 中包含2个 tuple,从输出的结果可以看出,有两个元组,每一个元组中有两个字符串 : 其中第一个字符串"猪 狗"是最外面 阅读全文
posted @ 2020-03-01 08:33 Double晨 阅读(112) 评论(0) 推荐(0) 编辑
摘要: 一、 (1) 项目名称:信息化领域热词分类分析及解释 (2) 功能设计: 数据采集:要求从定期自动从网络中爬取信息领域的相关热 词; 数据清洗:对热词信息进行数据清洗,并采用自动分类技术 生成信息领域热词目录,; 热词解释:针对每个热词名词自动添加中文解释(参照百度 百科或维基百科) 热词引用:并对 阅读全文
posted @ 2020-02-21 17:22 Double晨 阅读(855) 评论(0) 推荐(0) 编辑
摘要: 一、 数据爬取:爬取门户网站上的疫情统计数据,要求具体到各个省的地级市的每日的确诊病例的统计人数,并将上述爬取信息导入到本地数据库中。 二、 疫情分布图可视化展示:要求展示当前的疫情分布情况。单击各个省可以下钻到各个地市的数据显示。 爬取网站:https://voice.baidu.com/act/ 阅读全文
posted @ 2020-02-20 19:18 Double晨 阅读(195) 评论(0) 推荐(0) 编辑
摘要: (一)第一篇:讲的是到底什么是架构,个人理解为:把一整体划分为不同角色,各尽其职,完成不同分工,这个整体完成所需要的各种活动。 然后通过一个早期的例子来笼统地概括他的出现。在最早期,每个人都完全独立生活,衣、食、住、行等等全部都自己搞定,整个人类都是独立的个体,不相往来。为了解决人类的延续的问题,自 阅读全文
posted @ 2020-02-19 12:53 Double晨 阅读(174) 评论(0) 推荐(0) 编辑
摘要: 网址:http://www.beijing.gov.cn/hudong/hdjl/com.web.search.mailList.flow Python爬虫代码: import requests import re import xlwt # #https://flightaware.com/liv 阅读全文
posted @ 2020-02-15 23:57 Double晨 阅读(549) 评论(0) 推荐(0) 编辑
摘要: 后来在用JAVA爬取北京信件内容过程中出现好多问题。 我该用python爬取。 这个是我爬取出来的各个信件网址的后缀即(http://www.beijing.gov.cn/hudong/hdjl/com.web.suggest.suggesDetail.flow?originalId=AH20021 阅读全文
posted @ 2020-02-14 21:38 Double晨 阅读(250) 评论(0) 推荐(0) 编辑
摘要: 爬取北京市信件内容: 下载webmagic-0.7-libs.tar.gz压缩包,解压缩。没有压缩包可以加QQ:893225523 通过Filezilla上传到/home/hadoop/下载 sudo tar -zxf ~/下载/webmagic-0.7.3-all.tar.gz -C /data/ 阅读全文
posted @ 2020-02-14 17:24 Double晨 阅读(307) 评论(0) 推荐(0) 编辑
摘要: 林子雨实验六 Spark Streaming 编程初级实践 一、实验目的 (1)通过实验学习日志采集工具 Flume 的安装和使用方法; (2)掌握采用 Flume 作为 Spark Streaming 数据源的编程方法。 二、实验平台 操作系统: Ubuntu Spark 版本:3.0.0-pre 阅读全文
posted @ 2020-02-12 12:55 Double晨 阅读(327) 评论(0) 推荐(0) 编辑
摘要: 林子雨实验五 spark实验(五)--Spark SQL 编程初级实践(1) 一、实验目的(1)通过实验掌握 Spark SQL 的基本编程方法; (2)熟悉 RDD 到 DataFrame 的转化方法; (3)熟悉利用 Spark SQL 管理来自不同数据源的数据。 二、实验平台操作系统: ubu 阅读全文
posted @ 2020-02-11 11:43 Double晨 阅读(403) 评论(0) 推荐(0) 编辑
上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 24 下一页