12 2021 档案

摘要:21/12/19 16:38:54 INFO scheduler.TaskSetManager: Starting task 3.0 in stage 1.0 (TID 6, slave1, executor 3, partition 3, NODE_LOCAL, 8011 bytes) 21/12 阅读全文
posted @ 2021-12-19 17:19 15python 阅读(72) 评论(0) 推荐(0) 编辑
摘要:测试tensorflowonspark的例子的时候,提交的命令如下: /opt/cloudera/parcels/CDH-6.2.1-1.cdh6.2.1.p0.1580995/bin/spark-submit \--master yarn \--deploy-mode cluster \--que 阅读全文
posted @ 2021-12-15 21:13 15python 阅读(327) 评论(0) 推荐(0) 编辑
摘要:在安装CHD的时候,输入yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y报错 [root@master x86_64]# yum install cloudera-manager-agent-6.2.1-142606 阅读全文
posted @ 2021-12-14 21:44 15python 阅读(221) 评论(0) 推荐(0) 编辑
摘要:在centos7 安装CDH的时候,打yum install cloudera-manager-agent-6.2.1-1426065.el7.x86_64.rpm -y想安装agent的时候,出现以下错误,agent并没有安装上 [root@slave1 x86_64]# yum install 阅读全文
posted @ 2021-12-12 21:58 15python 阅读(993) 评论(0) 推荐(0) 编辑
摘要:搭建tensorflowonspark请参考:https://www.cnblogs.com/yangyuxia/p/15634030.html 步骤一:下载mnist数据集 cd /home/jianyuan curl -O "http://yann.lecun.com/exdb/mnist/tr 阅读全文
posted @ 2021-12-02 17:20 15python 阅读(271) 评论(0) 推荐(0) 编辑
摘要:该博客为了记录一下部署雅虎的tensorflowonspark分布式集群的经验,部署的是yarn模式,官网地址为:https://github.com/yahoo/TensorFlowOnSpark/wiki/GetStarted_YARN 简单介绍一下CDH是什么 CDH(Cloudra's Di 阅读全文
posted @ 2021-12-02 16:46 15python 阅读(102) 评论(0) 推荐(0) 编辑
摘要:目录 本地源yum 基础配置-防火墙等 远程登陆-ssh 语言环境-java 协调系统-ZK 集群安装-Hadoop 1本地源 Centos自带的YUM源更新太慢,可以使用更改本地源的方法来安装软件。我们通常使用 yum install 命令来在线安装 linux系统的软件, 这种方式可以自动处理依 阅读全文
posted @ 2021-12-02 10:30 15python 阅读(176) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示