【大数据】爬虫综合大作业
摘要：
作业要求来自于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3075 全球影迷期待的《复仇者联盟4》将于4月24日在内地上映。影片自开启预售以来，就创下一系列票房纪录——在美国仅用6小时就刷新了预售首日票房纪录，在中国内地用36小时 阅读全文
posted @ 2019-04-28 20:52 WAN*Y 阅读(578) 评论(0) 推荐(0) 编辑
【大数据】爬取全部的校园新闻
摘要：
1.从新闻url获取新闻详情： 字典,anews 2.从列表页的url获取新闻url：列表append(字典) alist 3.生成所页列表页的url并获取全部新闻 ：列表extend(列表) allnews *每个同学爬学号尾数开始的10个列表页 4.设置合理的爬取间隔 import time i 阅读全文
posted @ 2019-04-12 21:52 WAN*Y 阅读(304) 评论(0) 推荐(0) 编辑
【大数据】理解爬虫原理
摘要：
1. 简单说明爬虫原理 通过代码从网页抓取所需的信息。 2. 理解爬虫开发过程 1).简要说明浏览器工作原理； 从浏览器输入地址请求网页，服务器响应，传输网页，浏览器渲染并显示。 2).使用 requests 库抓取网站数据； 以下代码在课堂上用jupyter实现过了 requests.get(ur 阅读全文
posted @ 2019-03-27 21:57 WAN*Y 阅读(243) 评论(0) 推荐(0) 编辑
【大数据】中文词频统计
摘要：
中文词频统计 1. 下载一长篇中文小说。 汤姆索亚历险记 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 pip install jieba import jieba ljieba.lcut(text) 4. 更新词库，加入所分析对象的专业词汇。 jieba.add_word 阅读全文
posted @ 2019-03-18 21:54 WAN*Y 阅读(1326) 评论(0) 推荐(0) 编辑
【大数据】复合数据类型，英文词频统计
摘要：
1.列表，元组，字典，集合分别如何增删改查及遍历。 （1）列表 （2）元组 tr=['30','50'] tr2=['20','30'] del tr #删除整个元组 tr3=tr+tr2 #把两个元组组合在一起，结果为tr3=['30','50','20','30'] printf(tr[0]) 阅读全文
posted @ 2019-03-14 21:58 WAN*Y 阅读(235) 评论(0) 推荐(0) 编辑
【大数据】字符串、文件操作，英文词频统计预处理
摘要：
1.字符串操作： 解析身份证号：生日、性别、出生地等。 解析身份证号：生日、性别、出生地等。 凯撒密码编码与解码 凯撒密码编码与解码 网址观察与批量生成 网址观察与批量生成 2.英文词频统计预处理 下载一首英文的歌词或文章或小说，保存为utf8文件。 从文件读出字符串。 将所有大写转换为小写 将所有 阅读全文
posted @ 2019-03-06 21:21 WAN*Y 阅读(248) 评论(0) 推荐(0) 编辑
软件工程Ⅱ：四则运算升级版
摘要：
作业要求来自 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2232 我的结对同伴 https://www.cnblogs.com/bufengdianbuchengmo/p/9867075.html 我们的程序代码 https:// 阅读全文
posted @ 2018-10-29 12:21 WAN*Y 阅读(130) 评论(0) 推荐(0) 编辑
软件工程Ⅱ：小学四则运算
摘要：
作业要求来源于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2186 我的GitHub远端库 https://github.com/WAN-Y/gggit 一、题目要求： 像《构建之法》的人物阿超那样，写一个能自动生成小学四则运算题 阅读全文
posted @ 2018-10-15 13:28 WAN*Y 阅读(201) 评论(1) 推荐(0) 编辑
软件工程Ⅱ：读《构建之法》1~5章有感
摘要：
作业要求来源于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2178 国庆假期期间，我观看了这本软件工程课程所提供的教材。以下是我的读书笔记。 第1章 概论 这一章主要讲述了软件工程的概念，提出了一些延伸问题引导我们去思考。并给出了 阅读全文
posted @ 2018-10-08 11:56 WAN*Y 阅读(150) 评论(4) 推荐(0) 编辑
软件工程Ⅱ：Git的安装与使用
摘要：
作业要求来自于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2097 1.下载安装配置用户名和邮箱。 (1) 安装Git软件。 (2) 配置用户名和邮箱并确认。 2. 创建工作目录并通过git init命令把这个目录变成Git可以管理 阅读全文
posted @ 2018-09-17 17:27 WAN*Y 阅读(725) 评论(2) 推荐(0) 编辑
