05 2021 档案
摘要：1、启动chunckserver报元数据异常 在从新部署安装了master以后，重启chunckserver就报元数据id信息不一致，导致启动失败。 解决办法： 找到配置的所有chunck信息 依次删除该目录下的.metaid文件 然后重新启动 2、启动chunckserver报权限异常 hdd s
阅读全文
摘要：1、安装软件包 yum install gcc make rpm-build fuse-devel zlib-devel libpcap-devel-y 2、下载moosefs wget http://ppa.moosefs.com/src/moosefs-3.0.115-1.tar.gz 3、构建
阅读全文
摘要：本次操作使用root账号 操作系统版本：centos7.x 三台 安装依赖版本： mysql 5.7 java 1.8 maven 3.6 cachecloud 2.0 一、cachecloud 1、下载cachecloud软件包 git clone https://github.com/sohut
阅读全文
摘要：环境介绍： OS： centos7.x slapd： 2.4.44 防火墙和selinux都已经关闭 所有的操作均在root用户下执行。 一、服务端搭建 1.1 安装软件包 yum -y install openldap compat-openldap openldap-clients openld
阅读全文
摘要：1、配置core-site.xml文件 添加如下配置 <property> <name>hadoop.http.filter.initializers</name> <value>org.apache.hadoop.security.AuthenticationFilterInitializer</
阅读全文
摘要：1、创建快照 # gluster snapshot create trobvol-s1 trobvol snapshot create: success: Snap trobvol-s1_GMT-2021.05.16-02.47.36 created successfully 说明： trobvol
阅读全文
摘要：1、创建brick 在两台节点分别创建如下的目录： [root@hadoop4 ~]# mkdir /data/brick1/brick2 [root@hadoop4 ~]# mkdir /data/brick1/brick3 2、创建分布式副本卷 gluster volume create drv
阅读全文
摘要：环境准备： 两台节点，两块磁盘。 操作系统：centos7 1、创建replica volume 接着上一步，把创建分布式卷的磁盘从新利用 [root@k8s-node2 brick]# gluster volume create rv0 replica 2 hadoop4:/data/brick1
阅读全文
摘要：一、安装 1、配置yum源 操作系统是centos7.9版本 1.1 配置163yum源 http://mirrors.163.com/.help/CentOS7-Base-163.repo 1.2 配置存储yum源 # yum install centos-release-gluster 地址为：
阅读全文
摘要：1、失败信息如下 [root@hadoop4 ~]# gluster peer probe k8s-node2 peer probe: failed: Probe returned with Transport endpoint is not connected 2、分析 出现这种原因可能是由于se
阅读全文
摘要：1、报错信息 启动glusterfs文件系统报错，根据网上的排错，基本都是删除glusterfs的数据目录，然并卵。 报错如下： [root@k8s-node2 ~]# systemctl status glusterd.service ● glusterd.service - GlusterFS,
阅读全文
摘要：利用IDEA反编译jar包(idea需要安装插件Java Bytecode Decomplier) 在需要编译的jar包的目录下，打开命令行界面，输入以下命令： java -cp "D:\soft\IntelliJ IDEA 2020.2.3\plugins\java-decompiler\lib\
阅读全文
摘要：1、问题现象 执行insert overwrite 时出现moveing异常 具体异常如下： 2、分析 目前对于分区表执行的是动态分区的插入方式，可以发现其中的分区字段值变成了_HIVE_DEFAULT_PARTITION_，通过查询资料，这是因为在原始表中的分区字段值有null或者''值时，在插入
阅读全文
摘要：1、查看节点状态 oc get nodes 可以看到出现了节点不可用 2、查看节点详细的描述信息 oc describe node node_name 可以看到节点的状态未知，而处理节点信息的是kubelet进程，明显的异常就是 Kubelet stopped posting node status
阅读全文
摘要：1、问题现象 openshift集群近期扩容，新增加了一批机器，在新添加完成以后，发先调度到这些节点的pod都失败了，查看具体的信息，发现是镜像拉取失败(拉取策略是always)，进一步分析是由于不能解析registry。 2、dns解析过程 在openshift里面，解析依赖于dnsmasq 服务
阅读全文
摘要：本例不使用kerberos做认证，使用用户名和密码的方式来进行认证 1、服务端配置 1.0 配置server.properties 添加如下配置 #配置 ACL 入口类 authorizer.class.name=kafka.security.auth.SimpleAclAuthorizer #本例
阅读全文
摘要：执行命令 [hduser@hadoop4 bin]$ kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list 192.168.43.15:9092 --topic test --time -1 test:0:992786 test:1:
阅读全文
摘要：一、依赖 首先配置maven依赖 <!-- https://mvnrepository.com/artifact/org.apache.flink/flink-connector-kafka --> <dependency> <groupId>org.apache.flink</groupId> <
阅读全文
摘要：一、下载软件包 这里下载2021年最新版本的1.12 官网下载地址：官网 其他镜像源： http://mirrors.hust.edu.cn/apache/flink/flink-1.12.1/ 官网下载比较慢 对于flink来说，部署方式有三种，分别是local、standalone、yarn c
阅读全文
