摘要: Kafka项目在版本0.8和0.10之间引入了一个新的消费者API,因此有两个独立的相应Spark Streaming包可用。请选择正确的包, 请注意,0.8集成与后来的0.9和0.10代理兼容,但0.10集成与早期的代理不兼容。 注意:从Spark 2.3.0开始,不推荐使用Kafka 0.8支持 阅读全文
posted @ 2019-08-26 11:46 纯捡垃圾吃的 阅读(297) 评论(0) 推荐(0) 编辑
摘要: 一、登录Cloudera Manager (http://192.168.201.128:7180/cmf/login)时,无法访问web页面 针对此问题网上有较多的解决方案(e.g. https://www.cnblogs.com/zlslch/p/7078119.html), 如果还不能解决你的 阅读全文
posted @ 2019-08-23 08:59 纯捡垃圾吃的 阅读(1202) 评论(0) 推荐(0) 编辑
摘要: 1、通过管理平台分别停止组件服务和Cloudera Management Service 2、通过管理平台注销并移除Parcles (在控制台注销并移除,无论是安装的Parcles还是未安装的Parcles) 3、停止后台服务 sudo service cloudera-scm-agent stop 阅读全文
posted @ 2019-08-23 08:46 纯捡垃圾吃的 阅读(343) 评论(0) 推荐(0) 编辑
摘要: Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能 hive的元数据存储:通常是存储在关系数据库如 mysql(推荐) , derby(内嵌数据库)中 hive的组成部分 :解释器、编译器、优化器、执行器 hive具有sql数据库的外表,但 阅读全文
posted @ 2019-08-22 17:34 纯捡垃圾吃的 阅读(13831) 评论(0) 推荐(0) 编辑
摘要: //s函数的应用val name="Tom" s"Hello,$name" //Hello,Tom s"1+1=${1+1}" //1+1=2 阅读全文
posted @ 2019-08-19 11:27 纯捡垃圾吃的 阅读(1637) 评论(0) 推荐(0) 编辑
返回顶部