摘要：
Hadoop综合大作业 要求： 1.用Hive对爬虫大作业产生的文本文件（或者英文词频统计下载的英文长篇小说）进行词频统计。 1、启动hadoop 2、Hdfs上创建文件夹并查看 3、上传英文词频统计文本至hdfs 4、启动Hive 5、导入文件内容到表docs并查看 6、进行词频统计 7、查看统计 阅读全文
摘要：
通过hadoop上的hive完成WordCount 启动hadoop Hdfs上创建文件夹 创建文件夹 上传文件至hdfs 启动Hive 创建原始文档表 导入文件内容到表docs并查看 用HQL进行词频统计，结果放在表word_count里 查看统计结果 阅读全文
摘要：
用Python编写WordCount程序任务 程序 WordCount 输入 一个包含大量单词的文本文件 输出 文件中每个单词及其出现次数（频数），并按照单词字母顺序排序，每个单词和其频数占一行，单词和频数之间有间隔 1、编写map函数，reduce函数 （1）首先创建一个文件夹 mkdir wc 阅读全文
摘要：
1. 以下关系型数据库中的表和数据，要求将其转换为适合于HBase存储的表并插入数据： 学生表（Student）（不包括最后一列） 学号（S_No） 姓名（S_Name） 性别（S_Sex） 年龄（S_Age） 课程（course） 2015001 Zhangsan male 23 2015003 阅读全文
摘要：
一、Hadoop提供的Shell命令完成相同任务： 二、 阅读全文
摘要：
一、网站分析 1、 打开浏览器 在地址栏输入https://edu.cnblogs.com/posts，浏览器将会返回一页博文列表给我们，如下图： 我们按下F12快捷键，将会打开网页调试工具，点击network，可以看到我们对https://edu.cnblogs.com/posts的请求，以及 h 阅读全文
摘要：
取出h5标签的文本取出a标签的链接取出所有li标签的所有内容取出一条新闻的标题、链接、发布时间、来源 阅读全文
摘要：
联系要求 下载一首英文的歌词或文章 将歌词存入文件中，然后读取出来 将所有,.？！’:等分隔符全部替换为空格 将所有大写转换为小写 生成单词列表 生成词频统计 排序 排除语法型词汇，代词、冠词、连词 输出词频最大TOP20 将分析对象存为utf-8编码的文件，通过文件读取的方式获得词频分析内容。 2 阅读全文
摘要：
字符串联系: 列表： 元组： 字典： 集合： 总结列表、元组、字典、集合的联系和区别： 列表可以用 [] 括起来，元组是用()括起来，字典集合是都是用{}括起来 列表是可变序列，可以索引查找元素进行增删，而元组是只读列表，数据不可修改 字典是一对对键值对组成，键唯一值不唯一，集合是由无序且不重复的数 阅读全文
摘要：
运行结果图如下： 网址： http://news.gzcc.cn/html/2017/xiaoyuanxinwe n_1027/8443.html 取得校园新闻的编号 运行结果如下： 网址： https://docs.python.org/3/library/turtle.ht ml 产生pytho 阅读全文