会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
QiuhuaLiang
Powered by
博客园
博客园
|
首页
|
新随笔
|
联系
|
订阅
|
管理
2019年6月15日
大数据应用期末总评
摘要: 这篇作业的要求来源于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363 1.选取了 歌曲:Sidewalks 歌曲:Sidewalks 歌手:The Weeknd / Kendrick Lamar 的歌曲评论 这首歌是来自与一个热
阅读全文
posted @ 2019-06-15 20:58 QiuhuaLiang
阅读(180)
评论(0)
推荐(0)
编辑
2019年5月31日
分布式文件系统HDFS 练习
摘要: 这次作业的要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3310 利用Shell命令与HDFS进行交互 以”./bin/dfs dfs”开头的Shell命令方式 1.目录操作 在HDFS中为hadoop用户创建一个用户目录(ha
阅读全文
posted @ 2019-05-31 17:27 QiuhuaLiang
阅读(128)
评论(0)
推荐(0)
编辑
2019年5月14日
Hadoop的安装
摘要: 本次作业的要求来自于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223 1.安装Linux,MySql (1)成功安装虚拟机LINUX (2)安装mysql 2.windows 与 虚拟机互传文件 3.安装Hadoop 成功添加h
阅读全文
posted @ 2019-05-14 22:08 QiuhuaLiang
阅读(115)
评论(0)
推荐(0)
编辑
2019年5月9日
爬虫综合大作业
摘要: 本次作业要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3159 可以用pandas读出之前保存的数据: newsdf = pd.read_csv(r'F:\duym\gzccnews.csv') 一.把爬取的内容保存到数据库
阅读全文
posted @ 2019-05-09 19:58 QiuhuaLiang
阅读(396)
评论(0)
推荐(0)
编辑
2019年4月15日
爬取全部的校园新闻
摘要: 这次作业的要求来源https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3002 0.从新闻url获取点击次数,并整理成函数 newsUrl newsId(re.search()) clickUrl(str.format()) request
阅读全文
posted @ 2019-04-15 15:12 QiuhuaLiang
阅读(100)
评论(0)
推荐(0)
编辑
2019年4月1日
理解爬虫原理
摘要: 这次作业的要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2881 1. 简单说明爬虫原理 通过代码从网页抓取所需的信息 2. 理解爬虫开发过程 1).简要说明浏览器工作原理; 2).使用 requests 库抓取网站数据;
阅读全文
posted @ 2019-04-01 13:43 QiuhuaLiang
阅读(116)
评论(0)
推荐(0)
编辑
2019年3月25日
中文词频统计与词云生成
摘要: 作业要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2822 1. 下载一长篇中文小说。 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 4. 更新词库,加入所分析对象的专业词汇 5. 生成词频统计 6
阅读全文
posted @ 2019-03-25 13:33 QiuhuaLiang
阅读(244)
评论(0)
推荐(0)
编辑
2019年3月18日
复合数据类型,英文词频统计
摘要: 这次作业来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2753 1.列表,元组,字典,集合分别如何增删改查及遍历。 (1)列表 (2)元组 (3)字典 (4)集合 2.总结列表,元组,字典,集合的联系与区别。 列表(list)是
阅读全文
posted @ 2019-03-18 15:04 QiuhuaLiang
阅读(193)
评论(0)
推荐(0)
编辑
2019年3月11日
字符串操作、文件操作,英文词频统计预处理
摘要: 作业的要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2684 1.字符串操作: 解析身份证号:生日、性别、出生地等。 凯撒密码编码与解码 网址观察与批量生成 2.英文词频统计预处理 下载一首英文的歌词或文章或小说。 将所有大写转
阅读全文
posted @ 2019-03-11 16:28 QiuhuaLiang
阅读(155)
评论(0)
推荐(0)
编辑
2019年3月4日
了解大数据的特点、来源与数据呈现方式
摘要: 一.作业要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2639 二.作业完成情况: 1.浏览2019春节各种大数据分析报告,例如: 这世间,再无第二个国家有能力承载如此庞大的人流量。http://www.sohu.com/a
阅读全文
posted @ 2019-03-04 14:33 QiuhuaLiang
阅读(177)
评论(0)
推荐(0)
编辑
下一页