2020年2月14日

ajax()不执行success也不执行error的分析和解决

摘要: js代码如下 后端代码如下: 后端是返回json数据类型,不过调用之后还是不能进入success或者error中 分析由于ajax异步传输的缘故,还没有完成页面就进行刷新(由于用的是bootst,form表单时间触发就会自动刷新) 解决 把form标签换成div就好了 ps:总结了关于ajax的一些 阅读全文

posted @ 2020-02-14 00:59 冷冻 阅读(162) 评论(0) 推荐(0) 编辑

2019年6月17日

Hadoop综合大作业

摘要: 作业要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3339 本次选取的是爬取歌曲《因你太美》的歌评数据 1.将爬虫大作业产生的csv文件上传到HDFS 2.对CSV文件进行预处理生成无标题文本文件 3.把hdfs中的文本文 阅读全文

posted @ 2019-06-17 12:11 冷冻 阅读(299) 评论(0) 推荐(0) 编辑

2019年6月5日

分布式并行计算MapReduce

摘要: 作业要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3319 1. 用自己的话阐明Hadoop平台上HDFS和MapReduce的功能、工作原理和工作过程。 (1)HDFS的功能:元数据、检查点、DataNode功能 HDF 阅读全文

posted @ 2019-06-05 15:49 冷冻 阅读(178) 评论(0) 推荐(0) 编辑

2019年5月31日

大数据 | 分布式文件系统HDFS 练习

摘要: 本次作业来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3292 利用Shell命令与HDFS进行交互 以”./bin/dfs dfs”开头的Shell命令方式 1.目录操作 (1)在HDFS中为hadoop用户创建一个用户目录 阅读全文

posted @ 2019-05-31 21:31 冷冻 阅读(125) 评论(0) 推荐(0) 编辑

2019年5月9日

安装关系型数据库MySQL 安装大数据处理框架Hadoop

摘要: 作业来源于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3161 1. 简述Hadoop平台的起源、发展历史与应用现状。 列举发展过程中重要的事件、主要版本、主要厂商; 国内外Hadoop应用的典型案例。 (1)Hadoop起源 H 阅读全文

posted @ 2019-05-09 21:45 冷冻 阅读(132) 评论(0) 推荐(0) 编辑

2019年4月28日

爬虫大作业

摘要: 作业要求来自:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3075 本次作业爬取的是关于豆瓣电影的分类、影片等情况 导入本次作业所需要在包 爬取在目标是把分类在电影一次性爬取然后进行分析 准备代码提取网页在属性: 保存成csv文件 阅读全文

posted @ 2019-04-28 21:48 冷冻 阅读(298) 评论(0) 推荐(0) 编辑

2019年4月12日

爬取全部的校园新闻

摘要: 作业要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2941 代码: 效果: 2.从列表页的url获取新闻url:列表append(字典) alist 主要代码: 效果: 3.生成所页列表页的url并获取全部新闻 :列表exten 阅读全文

posted @ 2019-04-12 21:46 冷冻 阅读(83) 评论(0) 推荐(0) 编辑

2019年4月3日

获取一篇新闻的全部信息

摘要: 作业要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2894 给定一篇新闻的链接newsUrl,获取该新闻的全部信息 标题、作者、发布单位、审核、来源 发布时间:转换成datetime类型 点击: newsUrl newsId(使 阅读全文

posted @ 2019-04-03 21:35 冷冻 阅读(106) 评论(0) 推荐(0) 编辑

2019年3月27日

理解爬虫原理

摘要: 理解爬虫原理 作业要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2851 1. 简单说明爬虫原理 原理:通过程序模拟浏览器请求站点的行为,把站点返回的HTML代码/JSON数据/二进制数据(图片、视频) 爬到本地,进而提取自己需 阅读全文

posted @ 2019-03-27 20:17 冷冻 阅读(177) 评论(0) 推荐(0) 编辑

2019年3月18日

作业:中文词频统计

摘要: 这个作业的要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2773。 1. 下载一长篇中文小说。 我下载的是匪我思存的中长篇小说《红楼梦》 2. 读取文章 3. 安装并使用jieba进行中文分词 4. 对文章进行预处理 5. 阅读全文

posted @ 2019-03-18 21:48 冷冻 阅读(143) 评论(0) 推荐(0) 编辑

导航