摘要： 作业缘由：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363 这是爬取的数据，豆瓣上权利的游戏的影评，将txt文件转换为csv文件 准备工作，开启hadoop,mysql,hive 服务，挂在文件。 查询爬取的数据 创建表 创建表 阅读全文

摘要： 作业缘由：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3310 利用Shell命令与HDFS进行交互 以”./bin/dfs dfs”开头的Shell命令方式 1.目录操作 在用户目录下创建一个input目录 在HDFS的根目录下创 阅读全文

摘要： 本次作业的要求来自于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223 1.安装Linux，MySql 2.windows 与 虚拟机互传文件 3.安装Hadoop 还不能从windows复制文件的，可在虚拟机里用浏览器下载安装文 阅读全文

摘要： 作业缘由：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3159 爬虫对象：权利的游戏 爬虫网址：https://movie.douban.com/subject/3016187/ 为了防止爬取过程中ip被禁，我们需要设置一定的爬取间 阅读全文

摘要： 作业要求：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3002 0.从新闻url获取点击次数，并整理成函数 newsUrl newsId(re.search()) clickUrl(str.format()) requests.ge 阅读全文

摘要： 随笔缘由：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2881 1. 简单说明爬虫原理 （1）向服务器发起请求 （2）获取响应内容 （3）解析内容 （4）保存内容 2. 理解爬虫开发过程 1).简要说明浏览器工作原理； Reques 阅读全文

摘要： 作业要求来源于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2822 1. 下载一长篇中文小说。 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 pip install jieba import jieba 阅读全文

摘要： 随笔原有：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2753 1.列表，元组，字典，集合分别如何增删改查及遍历。 （1）列表 增： 删： 改： 查： 遍历： （2）元组 （3）字典 （4）集合 2.总结列表，元组，字典，集合的联系 阅读全文

摘要： 随笔缘由：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2684 1.字符串操作： 解析身份证号：生日、性别、出生地等。 凯撒密码编码与解码 网址观察与批量生成 2.英文词频统计预处理 下载一首英文的歌词或文章或小说。 将所有大写转换 阅读全文

摘要： 作业来源：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2639 1.浏览2019春节各种大数据分析报告，例如： 这世间，再无第二个国家有能力承载如此庞大的人流量。http://www.sohu.com/a/290025769_313 阅读全文