随笔分类 -  Spark

网易邮件帐号
该文被密码保护。
posted @ 2020-04-11 16:30 雷神约 阅读(0) 评论(0) 推荐(0)
YARN 与Maprd 配置
摘要：<!-- yarn 配置 --> <!-- yarn-sit.xml --> <property> <name>yarn.resourcemanager.hostname</name> <value>master</value> </property> <property> <name>yarn.n 阅读全文
posted @ 2019-03-28 11:21 雷神约 阅读(153) 评论(0) 推荐(0)
弹性分布式数据集RDD概述
摘要：【Spark】弹性分布式数据集RDD概述 弹性分布数据集RDD RDD(Resilient Distributed Dataset)是Spark的最基本抽象，是对分布式内存的抽象使用，实现了以操作本地集合的方式来操作分布式数据集的抽象实现。RDD是Spark最核心的东西，它表示已被分区，不可变的并能 阅读全文
posted @ 2019-03-25 13:50 雷神约 阅读(512) 评论(0) 推荐(0)