07 2017 档案
摘要：前提：服务器已经安装好了hadoop_client端即hadoop的环境hbase,hive等相关组件 1.环境和变量配置①拷贝hive的配置文件hive-site.xml到zeppelin-0.7.2-bin-all/conf下 ②进入conf下进行环境变量的配置 2.在web界面配置集成hive
阅读全文
摘要：通过hue的web界面进行hive的sql查询，无法显示结果并报错timeout 报错如下：[28/Jul/2017 11:23:29 +0800] decorators ERROR error running <function execute at 0x7fa741ddc8c0>Tracebac
阅读全文
摘要：centos6.5中部署Zeppelin并配置账号密码验证1.安装JavaZeppelin支持的操作系统如下图所示。在安装Zeppelin之前，你需要在部署的服务器上安装Oracle JDK 1.7或以上版本, 并配置好相应的JAVA_HOME环境变量。以CentOS为例，具体操作过程如下： a)下
阅读全文
摘要：该监控基于iostat,然后iostat 命令用来监视系统输入/输出设备负载 1.安装IOSTAT工具 测试iostat 查看所有硬盘io 2.部署脚本 # 设置参数 #重启zabbix_agentd # 测试自动发现 3.加入crontab # 重启计划任务/etc/init.d/crond re
阅读全文
摘要：Zabbix监控nginx性能的另外一种方式 nginx和php-fpm一样内建了一个状态页，对于想了解nginx的状态以及监控nginx非常有用，为了后续的zabbix监控，我们需要先启用nginx状态页 1. 启用nginx status配置在默认主机里面加上location或者你希望能访问到的
阅读全文
摘要：关于centos7和centos6中平滑升级nginx到新版本v1.12.1修复CVE-2017-7529漏洞的解决方案 漏洞描述 2017年7月11日，Nginx官方发布最新的安全公告，在Nginx范围过滤器中发现了一个安全问题（CVE-2017-7529），通过精心构造的恶意请求可能会导致整数溢
阅读全文
摘要：持续集成之⑤:jenkins结合脚本实现代码自动化部署及一键回滚至上一版本 一：本文通过jenkins调用shell脚本的的方式完成从Git服务器获取代码、打包、部署到web服务器、将web服务器从负载均衡器删除、解压、复制配置文件、创建软连接、测试每一台web服务器、将web服务器添加至负载均衡、
阅读全文
摘要：持续集成之④:GitLab触发jenkins构建项目 一：目的为在公司的测试环境当中一旦开发向gitlab仓库提交成功代码，gitlab通知jenkins进行构建项目、代码质量测试然后部署至测试环境，注意这只是测试环境，而生产环境依然需要手动部署代码： 1.1：jenkins配置：1.1.1:安装G
阅读全文
摘要：持续集成之③:将代码自动部署至测试环境 一：本文在上一篇文章的基础之上继续进行操作，上一篇实现了从git获取代码并进行代码测试，本文将在上一篇的基础之上实现将代码部署至测试环境。1.1：新建一个项目叫web-demo-deploy用于代码发布，上一个项目web-demo可用于代码测试，当测试阶段出现
阅读全文
摘要：持续集成之②:整合jenkins与代码质量管理平台Sonar并实现构建失败邮件通知 一：Sonar是什么？Sonar 是一个用于代码质量管理的开放平台，通过插件机制，Sonar 可以集成不同的测试工具，代码分析工具，以及持续集成工具。与持续集成工具（例如 Hudson/Jenkins 等）不同，So
阅读全文
摘要：持续集成①安装部署jenkins从git获取代码 一：持续集成的概念： 1.1:总体的概括 1.2：什么是持续集成：持续集成是指开发者在代码的开发过程中，可以频繁的将代码部署集成到主干，并进程自动化测试 1.3：什么是持续交付：持续交付指的是在持续集成的环境基础之上，将代码部署到预生产环境 1.4：
阅读全文
摘要：1.自动化测试脚本unixbench yum install -y wgetwget --no-check-certificate https://github.com/teddysun/across/raw/master/unixbench.shchmod +x unixbench.sh./uni
阅读全文
摘要：ubuntu server 14.04 上安装jdk1.8 1.使用apt-get安装oracle-jdk安装oracle jdk sudo apt-get install python-software-propertiessudo add-apt-repository ppa:webupd8te
阅读全文
摘要：运维与自动化系列④自动化部署基础与git 自动化部署基础与git 一：上一篇的代码是保存在本地，但是在生产环境当中是由版本控制进行代码管理，以便于发布代码和回滚，一般是使用gitlib比较多，另外还有用svn的公司，趋势是git为主，因此本文以git为使用对象 1.1：在git服务器新建一个web组
阅读全文
摘要：自动化部署基础与shell脚本实现 关于自动化的基础知识： 1.1：当前代码部署的实现方式： 运维纯手工scp到web服务器纯手工登录git服务器执行git pull或svn服务器执行svn update更新代码通过xftp上传代码开发打压缩包上传到服务器然后解压 缺点：1.需要运维全程参与，占用大
阅读全文
摘要：自动化安装和部署概述 一、自动化安装1.采购–>验货–>签字，验货单，盖公章。 2.资产管理：资产录入–>机房、区域、排、机柜、位置、配置（资产管理，验收单）（自动化获取） 3.RAID-（验货的时候）RAID,自动化进行配置 4.CMDB：资产录入–>机房、区域、排、机柜、位置、配置。MAC地址清
阅读全文
摘要：运维与自动化概述 一：运维工作内容分类： 1).机房运维（负责服务器上下架、IP配置与划分、服务器打标签、机房定期巡检、服务器故障报修、服务器硬件监控) 2).基础设施运维（系统安装及初始化、网络维护） 3).监控运维（7×24运维值班、简单故障处理、通知相关业务负责人） 4).基础服务运维（包含运
阅读全文
摘要：Git系列②之部署企业级开源仓库gitlab服务器 上一篇我们介绍了github的常见使用方法，下面开始部署本地开源仓库gitlab GitLab 是一个用于仓库管理系统的开源项目。 1.安装配置gitlab依赖项 如想使用Postfix来发送邮件,在安装期间请选择'Internet Site'.
阅读全文