关闭页面特效
随笔分类 - 环境搭建与运维
大数据+人工智能+云计算运维
大数据运维（54）kibana 安装
摘要：下载：https://www.elastic.co/downloads/kibana 文档：https://www.elastic.co/guide/en/kibana/current/index.html 安装 安装jdk： 1 yum install -y java-1.8.0-openjdk-
阅读全文
大数据运维（53）tomcat 安装
摘要：下载tomcat： 官网下载： 1 https://tomcat.apache.org/download-80.cgi 阿里云下载： 1 https://mirrors.tuna.tsinghua.edu.cn/apache/tomcat/tomcat-8/ 安装： 1 2 3 4 5 6 7 8
阅读全文
大数据运维（52）zabbix安装
摘要：安装mysql 1 2 3 4 5 6 7 8 9 10 11 wget https://dev.mysql.com/get/mysql80-community-release-el7-2.noarch.rpm rpm -ivh mysql80-community-release-el7-2.noa
阅读全文
大数据运维（51）zabbix监控tomcat
摘要：在zabbix server上： zabbix-java-gateway： 安装zabbix-java-gateway： 1 yum -y install zabbix-java-gateway 配置： 1 2 3 4 5 vim /etc/zabbix/zabbix_java_gateway.co
阅读全文
大数据运维（50）zabbix监控MySQL
摘要：在mysql上安装agent：下面是配置文件 1 2 3 4 5 6 7 8 9 PidFile=/var/run/zabbix/zabbix_agentd.pid LogFile=/var/log/zabbix/zabbix_agentd.log LogFileSize=0 Server=192.
阅读全文
大数据运维（49）Linux上安装部署Zabbix
摘要：环境准备 OS：CentOS 7 安装步骤 一，关闭selinux和iptables [root@localhost ~]# systemctl stop firewalld.service [root@localhost ~]# setenforce 0 二，安装Zabbix rpm包仓库 [ro
阅读全文
大数据运维（48）elasticsearch es yum安装
摘要：ES下载页：下载后yum直接安装即可。 1 https://www.elastic.co/cn/downloads/elasticsearch 文档地址： 1 https://www.elastic.co/guide/en/elasticsearch/reference/7.0/index.html
阅读全文
大数据运维（47）Linux上安装Groovy
摘要：下载安装包： 1 http://www.groovy-lang.org/download.html 安装： 1 2 unzip apache-groovy-sdk-2.5.8.zip -d /usr/local ln -sv groovy-2.5.8/ groovy 配置环境变量： 1 2 3 4
阅读全文
大数据运维（46）hadoop 2.10集群搭建
摘要：hadoop官方文档： 1 https://hadoop.apache.org/docs/ 安装hadoop集群 配置DNS解析或hosts文件： 1 2 3 4 5 6 7 cat > /etc/hosts <<EOF 127.0.0.1 localhost localhost.localdoma
阅读全文
大数据运维（45）zookeeper 3.4集群搭建
摘要：安装zookeeper之前先安装java： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 tar -xf jdk-8u231-linux-x64.tar.gz -C /usr/local/ cd /usr/local/ ln -sv jdk1.8.0_231/ jdk ca
阅读全文
大数据运维（44）HBase 1.2.1集群部署
摘要：安装HBase之前先安装zookeeper。 官方下载地址： 1 http://archive.apache.org/dist/hbase/1.2.1/ 清华下载地址： 1 http://mirror.bit.edu.cn/apache/hbase/ 配置DNS解析： 1 2 3 4 5 6 7 8
阅读全文
大数据运维（43）Spark 2.4.6集群部署
摘要：安装spark之前先安装hadoop集群。 spark下载地址： 1 https://downloads.apache.org/spark/ 下载安装包： 1 wget https://downloads.apache.org/spark/spark-2.4.6/spark-2.4.6-bin-ha
阅读全文
大数据运维（42）Hive 2.3.7搭建
摘要：安装hive之前先安装hadoop集群。 hive安装在master节点上，理论上是可以任意安装在其他节点的，不过要配置。 安装mysql：hive需要mysql，测试用root账号即可。 mysql> create user 'hive'@'%' identified by 'hive'; //创
阅读全文
大数据运维（41）kafka 2.3.0集群部署
摘要：安装kafka之前先安装zookeeper。 配置DNS解析： 1 2 3 4 5 6 7 8 9 10 cat > /etc/hosts <<EOF 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomai
阅读全文
大数据运维（40）ElasticSearch安装ik中文分词器
摘要：官方文档： 1 https://github.com/medcl/elasticsearch-analysis-ik 创建目录： 1 2 cd xxx/plugins/ mkdir ik 查看版本： 1 2 3 4 5 6 7 8 9 10 11 12 13 14 # curl -XGET loca
阅读全文
大数据运维（39）Kylin 3.1.0集群部署
摘要：安装kylin之前先安装如下： Hadoop: 2.7+, 3.1+ (since v2.5) Hive: 0.13 - 1.2.1+ HBase: 1.1+, 2.0 (since v2.5) Spark (可选) 2.3.0+ Kafka (可选) 1.0.0+ (since v2.5) JDK
阅读全文
大数据运维（38）Flink 1.11.1部署安装
摘要：安装Flink之前先安装hadoop集群。 Flink下载： https://flink.apache.org/downloads.html https://mirrors.tuna.tsinghua.edu.cn/apache/flink/flink-1.11.1/flink-1.11.1-bin
阅读全文
大数据运维（37） Hadoop+Hive+HBase+Kylin +spark+Flink伪分布式安装
摘要：问题导读 1.Centos7如何安装配置？ 2.linux网络配置如何进行？ 3.linux环境下java如何安装？ 4.linux环境下SSH免密码登录如何配置？ 5.linux环境下Hadoop2.7如何安装？ 6.linux环境下Mysql如何安装？ 7.linux环境下Hive如何安装？ 8
阅读全文
大数据集群运维（36）linux下的几个网络流量监控工具使用
摘要：1、nethogs 1)NetHogs是一款开源、免费的，终端下的网络流量监控工具，它可监控Linux的进程或应用程序的网络流量。NetHogs只能实时监控进程的网络带宽占用情况。NetHogs支持IPv4和IPv6协议，支持本地网卡以及PPP链接 2)debian下安装 apt-get insta
阅读全文
大数据集群运维（35）sqoop安装与使用
摘要：sqoop 是什么：在关系数据库和hadoop之间数据的相互转换的工具。安装：原生安装：appache１．解压安装，２．重命名sqoop-1.4.5-cdh5.4.4/sqoop-env-template.sh 为sqoop-env.sh３．修改sqoop-env.sh配置：填写Hadoop，hba
阅读全文
