摘要:
在使用spring框架中的依赖注入注解@Autowired时,idea报了一个警告 大部分被警告的代码都是不严谨的地方,所以我深入了解了一下。 被警告的代码如下: 警告内容是 意思就是使用变量依赖注入的方式是不被推荐的。 使用idea解决策略是这样的: 意思就是总是使用构造器的方式强制注入。 依赖注 阅读全文
摘要:
Spring Boot的一个好处就是通过注解可以轻松获取前端页面的参数,之后可以将参数经过一系列处理传送到后台数据库。 获得的方式有很多种,这里稍微总结一下,大致分为以下几种: 1.指定前端url请求参数名与方法参数名一致 举个例子,一个url请求http://localhost:8080/0919 阅读全文
摘要:
Install clusterEnable Namenode HAStart RU"Zookeeper" is completed"Core Masters" failed on RESTART HDFS/JOURNALNODE: https://issues.apache.org/jira/bro 阅读全文
摘要:
因为fastdfs-client-java-1.27-SNAPSHOT.jar这个依赖包在maven中央仓库是没有的, 需要自己编译源码成jar本地安装到maven 的本地仓库,安装完以后就能正常引用了(注意:本地必须安装了Maven,并配置好Maven环境变量) 1.下载fastdfs-clien 阅读全文
摘要:
how to disable service auto start by API as the following how to enable service auto start by API as the following @Michael Bronson Do you mean someth 阅读全文
摘要:
源码文档路径:ambari\ambari-server\docs\api\v1 swagger风格api文档:https://www.cnblogs.com/felixzh/p/10694724.html Ambari 借鉴了很多成熟分布式软件的 API 设计。Rest API 就是一个很好地体现。 阅读全文
摘要:
Short Description: This article will describe on how to disable CSRF protection in Ambari. Short Description: Article Adding service through ambari gi 阅读全文
摘要:
How To: Use Swagger with Ambari (Explore Ambari REST) Article Note : This feature is available from HDP 3.0 (Ambari 2.7) Ambari 2.7 has a cool new fea 阅读全文
摘要:
目前来看,导致hdfs一直处于safemode模式最直接的原因是已成功复制的块的比例没有达到默认值,块的损坏也会造成一直处于安全模式。 1)文件系统中有损坏的文件,使用fsck命令来查看 以上是查看hdfs的根目录下的所有文件健康状况,如果有损坏的文件,就会提示: 接下来就是排错,查看究竟是哪个目录 阅读全文
摘要:
Introduction Notable JIRAs API Resources and Syntax Blueprint Usage Overview Step 0: Prepare Ambari Server and Agents Step 1: Create Blueprint Step 2: 阅读全文
摘要:
错误提示安装依赖的库文件没有找到: libmysqlclient.so.18()(64bit) 解决方法是这样的: 安装mysql-community-libs-compat-5.7.18-1.el7.x86_64.rpm 下载地址:https://dev.mysql.com/get/Downloa 阅读全文
摘要:
User root is not allowed to impersonate anonymous 修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项 <property> <name>hadoop.proxyuser.root.hosts</name> < 阅读全文
摘要:
Yes. That is a known issue. Modify Ambari Server's java.home to the standard oracle jdk. 3 隐藏 6 · 分享 rgarcia · 2015年09月23日 20:27 0 that fixed it. Than 阅读全文
摘要:
HDP 2.6 requires libtirpc-devel 个问题,截止 Mustafa Kemal MAYUK 2017年06月30日 06:30 hadoopPowerSystems Hello, I am trying to install HDP 2.6 on RHEL 7.2 ppc6 阅读全文
摘要:
众所周知,由于Zookeeper并不适合大批量的频繁写入操作,新版Kafka已推荐将consumer的位移信息保存在Kafka内部的topic中,即__consumer_offsets topic,并且默认提供了kafka_consumer_groups.sh脚本供用户查看consumer信息。 不 阅读全文
摘要:
方法1.ntp 平滑同步时间 (一)确认ntp的安装 1)确认是否已安装ntp 【命令】 rpm –qa | grep ntp 若只有ntpdate而未见ntp,则需删除原有ntpdate。如: ntpdate-4.2.6p5-22.el7_0.x86_64 fontpackages-filesys 阅读全文
摘要:
前言 本文是讲如何在centos7(64位) 安装ambari+hdp,如果在装有原生hadoop等集群的机器上安装,需要先将集群服务停掉,然后将不需要的环境变量注释掉即可,如果不注释掉,后面虽然可以安装成功,但是在启动某些服务的时候可能会有异常,比如最后提到的hive启动异常。本文适合系统: Re 阅读全文
摘要:
1、mysql官网下载安装包,官网地址:www.mysql.com [root@seiang software]# ll total 580020 -rw-r--r--. 1 root root 593940480 Mar 25 18:57 mysql-5.7.21-1.el7.x86_64.rpm 阅读全文
摘要:
Ubuntu的软件包格式是deb,如果要安装rpm的包,则要先用alien把rpm转换成deb。 sudo apt-get install alien #alien默认没有安装,所以首先要安装它 sudo alien xxxx.rpm #将rpm转换位deb,完成后会生成一个同名的xxxx.deb 阅读全文
摘要:
Running Apache Storm Securely Apache Storm offers a range of configuration options when trying to secure your cluster. By default all authentication a 阅读全文
摘要:
Ambari安装 1 Ambari简介 Apache Ambari项目的目的是通过开发软件来配置、监控和管理hadoop集群,以使hadoop的管理更加简单。同时,ambari也提供了一个基于它自身RESTful接口实现的直观、简单易用的web管理界面。 Ambari允许系统管理员进行以下操作: 1 阅读全文
摘要:
一、Ambari基本架构 img016.jpg Ambari Server 会读取 Stack 和 Service 的配置文件。当用 Ambari 创建服务的时候,Ambari Server 传送 Stack 和 Service 的配置文件以及 Service 生命周期的控制脚本到 Ambari A 阅读全文
摘要:
1.安装rpmrebuild 和安装rpmbuild rpmrebuild下载链接: https://sourceforge.net/projects/rpmrebuild/files/rpmrebuild/2.12-1/ rpmbuild直接用yum安装 : 2.配置rpm编译目录 保存。 3.创 阅读全文
摘要:
直接看官网 http://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html#hbasesinks 阅读全文
摘要:
1. 提交任务的命令 spark-submit \--class <classname> \--master yarn \--deploy-mode client \--executor-memory 2g \--executor-cores 2 \--driver-memory 2g \--num 阅读全文
摘要:
一、准备环境: 创建Kafka Topic和HBase表 1. 在kerberos环境下创建Kafka Topic 1.1 因为kafka默认使用的协议为PLAINTEXT,在kerberos环境下需要变更其通信协议: 在${KAFKA_HOME}/config/producer.propertie 阅读全文
摘要:
Use the following steps to run a Spark Streaming job on a Kerberos-enabled cluster. Select or create a user account to be used as principal. This shou 阅读全文
摘要:
Ranger-Kafka插件安装, 使用Ranger0.7.0版本,集成Kafka插件到Kafka集群, Kafka Plugin需要安装到所有的Kafka的集群节点上面。 1.登陆Kafka的安装用户 2.下载插件包 scp pub@10.43.156.193:/home/pub/ranger/r 阅读全文
摘要:
This post originally appeared on the Apache Flink blog. It was reproduced here under the Apache License, Version 2.0. This blog post provides an intro 阅读全文
摘要:
In this blog post I will show you kafka integration with ganglia, this is very interesting & important topic for those who want to do bench-marking, m 阅读全文