上一页 1 2 3 4 5 6 7 8 ··· 15 下一页
摘要: 实验目的 1.了解Hadoop自带的几种输入格式 2.准确理解MapReduce自定义输入格式的设计原理 3.熟练掌握MapReduce自定义输入格式程序代码编写 4.培养自己编写MapReduce自定义输入格式程序代码解决实际问题 实验原理 1.输入格式:InputFormat类定义了如何分割和读 阅读全文
posted @ 2021-12-10 23:42 学习中_1 阅读(275) 评论(0) 推荐(0) 编辑
摘要: # 导入依赖 import jieba def fun(): # 读取文本 file = open("D:\\yx.txt", "r", encoding='utf-8').read() # 使用精确模式对文本进行分词 words = jieba.lcut(file) # 通过键值对的形式存储词语及 阅读全文
posted @ 2021-12-09 20:47 学习中_1 阅读(53) 评论(0) 推荐(0) 编辑
摘要: MongoDB数据库操作 Student文档如下: { “name”: “zhangsan”, “score”: { “English”: 69, “Math”: 86, “Computer”: 77 } } { “name”: “lisi”, “score”: { “English”: 55, “ 阅读全文
posted @ 2021-12-08 15:45 学习中_1 阅读(167) 评论(0) 推荐(0) 编辑
摘要: 任务一:导入JFinal工程 选择Maven项目导入 选择刚刚下载的demo 导入完成 按照教程启动 启动成功 任务二:阅读JFinal的源码并对每一部分的功能进行介绍 任务三:基于JFinal完成一个简单的学生信息管理系统 项目结构: 功能演示: 界面: 添加学生: 删除学生: 删除王五为例 修改 阅读全文
posted @ 2021-12-07 20:20 学习中_1 阅读(183) 评论(0) 推荐(0) 编辑
摘要: 任务一:导入并配置Guns框架 下载Demo 导入项目 配置数据库 启动项目 启动成功 任务二:阅读Gans的源码并对每一部分的功能进行介绍 包 类/接口 功能 cn.stylefeng.guns GunsApplication SpringBoot方式启动类 GunsServletInitiali 阅读全文
posted @ 2021-12-07 20:17 学习中_1 阅读(219) 评论(0) 推荐(0) 编辑
摘要: 二、实验内容 1.虚拟机集群搭建部署hadoop 安装VM 在VM中安装Linux 在linux中安装hadoop 2.HDFS文件操作 启动hadoop 上传文件 3.MAPREDUCE并行程序开发 3.1 求每年最高气温 import java.io.IOException; import or 阅读全文
posted @ 2021-12-06 23:53 学习中_1 阅读(52) 评论(0) 推荐(0) 编辑
摘要: 实验目的 1.准确理解ChainMapReduce的设计原理 2.熟练掌握ChainMapReduce的程序代码编写 3.了解ChainMapReduce的使用场景 实验原理 一些复杂的任务难以用一次MapReduce处理完成,需要多次MapReduce才能完成任务。Hadoop2.0开始MapRe 阅读全文
posted @ 2021-12-06 23:40 学习中_1 阅读(66) 评论(0) 推荐(0) 编辑
摘要: 实验目的 1.了解倒排索引的使用场景 2.准确理解倒排索引的设计原理 3.熟练掌握MapReduce倒排索引程序代码编写 实验原理 "倒排索引"是文档检索系统中最常用的数据结构,被广泛地应用于全文搜索引擎。它主要是用来存储某个单词(或词组)在一个文档或一组文档中的存储位置的映射,即提供了一种根据内容 阅读全文
posted @ 2021-12-06 23:38 学习中_1 阅读(299) 评论(0) 推荐(0) 编辑
摘要: 实验目的 1.准确理解MapReduce二次排序的设计原理 2.了解二次排序的适用场景 3.熟练掌握MapReduce二次排序程序代码编写 实验原理 在Map阶段,使用job.setInputFormatClass定义的InputFormat将输入的数据集分割成小数据块splites,同时Input 阅读全文
posted @ 2021-12-06 23:36 学习中_1 阅读(81) 评论(0) 推荐(0) 编辑
摘要: 实验目的 1.准确理解MapReduce单表连接的设计原理 2.熟练掌握MapReduce单表连接程序的编写 3.了解单表连接的运用场景 4.学会编写MapReduce单表连接程序代码解决问题 实验原理 以本实验的buyer1(buyer_id,friends_id)表为例来阐述单表连接的实验原理。 阅读全文
posted @ 2021-12-06 23:31 学习中_1 阅读(37) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 7 8 ··· 15 下一页