大数据Hadoop第九周——Scala开发环境搭建+Scala语言值变量类型表达式
摘要：大数据第9周 1.Scala开发环境搭建 目前具备全部功能的集成开发环境只有Idea。 下载解压idea：tar -zxvf ideaIE-2019.3.3.tar.gz。 进入bin目录，执行：./idea.sh。 选择新建一个project。 接着按如下界面选择。 进入如下界面。输入Pr
阅读全文
posted @
2020-04-26 14:24
蔡军帅
阅读(453)
推荐(0) 编辑
大数据Hadoop第九周——Scala开发环境搭建+Scala语言值变量类型表达式
摘要：大数据第9周1.Scala开发环境搭建目前具备全部功能的集成开发环境只有Idea。下载解压idea：tar -zxvf ideaIE-2019.3.3.tar.gz。进入bin目录，执行：./idea.s...
阅读全文
posted @
2020-04-26 14:24
蔡军帅
阅读(132)
推荐(0) 编辑
大数据Hadoop第八周——Wordcount程序的运行+Spark下载解压+Scala语言环境和简介
摘要：大数据第8周1.Wordcount程序的运行1.1准备数据上传到hdfs一个英文的文本文件，尽量不要在根目录下。文件内容也不要太多，可以自己数清楚有几个词，方便检查是否正确。1.2写入运行参数当前界面显示...
阅读全文
posted @
2020-04-21 13:50
蔡军帅
阅读(213)
推荐(0) 编辑
大数据Hadoop第八周——Wordcount程序的运行+Spark下载解压+Scala语言环境和简介
摘要：大数据第8周 1.Wordcount程序的运行 1.1准备数据 上传到hdfs一个英文的文本文件，尽量不要在根目录下。文件内容也不要太多，可以自己数清楚有几个词，方便检查是否正确。 1.2写入运行参数 当前界面显示出要运行的程序，然后点击主菜单的“run”。 并选择“Run Configuratio
阅读全文
posted @
2020-04-21 13:50
蔡军帅
阅读(224)
推荐(0) 编辑
大数据Hadoop第七周——Eclipse环境下java语言mapreduce程序开发环境配置+WordCount.java详解
摘要：大数据第七周 1 Eclipse环境下java语言mapreduce程序开发环境配置 1.1 拷贝eclipse软件 先拷贝到根目录下，然后解压 tar -zxvf eclipse-java-2020-03-R-linux-gtk-x86_64.tar.gz 打开eclipse：进入eclipse
阅读全文
posted @
2020-04-14 17:01
蔡军帅
阅读(460)
推荐(0) 编辑
大数据Hadoop第七周——Eclipse环境下java语言mapreduce程序开发环境配置+WordCount.java详解...
摘要：大数据第七周1 Eclipse环境下java语言mapreduce程序开发环境配置1.1 拷贝eclipse软件先拷贝到根目录下，然后解压tar -zxvf eclipse-java-2020-03-R-...
阅读全文
posted @
2020-04-14 17:01
蔡军帅
阅读(211)
推荐(0) 编辑
大数据Hadoop第六周——启动集群并验证
摘要：大数据第6周1.启动集群并验证启动集群：start-all.sh启动后先用jps验证线程数是否正确，按照我的配置，master节点线程：连个slave节点：为了验证集群mapreduce工作是否正常，...
阅读全文
posted @
2020-04-07 22:50
蔡军帅
阅读(173)
推荐(0) 编辑
大数据Hadoop第六周——启动集群并验证
摘要：大数据第6周 1.启动集群并验证 启动集群：start-all.sh 启动后先用jps验证线程数是否正确，按照我的配置，master节点线程： 连个slave节点： 为了验证集群mapreduce工作是否正常，可以运行例子程序，例如： 进入相应目录hadoop-2.7/share/hadoo
阅读全文
posted @
2020-04-07 22:50
蔡军帅
阅读(666)
推荐(0) 编辑
