摘要: 大数据介绍 1.数据的存储(big data storage),海量数据需要处理和分析,但前提是要进行有效的存储。稍后会提到Hadoop(HDFS)分布式文件系统对超大数据集的容错性问题。 2.数据的计算(Data calculation),在数据有效存储的基础上,对数据的统计和分析本质上就是数据的 阅读全文
posted @ 2019-10-18 17:32 爱写bug的小猿 阅读(1018) 评论(0) 推荐(0) 编辑
摘要: 1) docker中运行mongodb 镜像下载 执行 docker search mongo 命令和docker pull mongo 运行mongo镜像: docker run \ --name mongodb_server \ -p 27017:27017 \ -v /mysoft/mongo 阅读全文
posted @ 2019-10-18 17:30 爱写bug的小猿 阅读(191) 评论(0) 推荐(0) 编辑
摘要: mvn clean 清除项目生产的临时文件,一般在target里面mvn package 项目打包工具,会在模块下的target目录生成对应jar或war等文件mvn test 测试命令,或执行src/test/java/下junit的测试用例-Dmaven.test.skip=true 跳过测试m 阅读全文
posted @ 2019-10-18 17:28 爱写bug的小猿 阅读(489) 评论(0) 推荐(0) 编辑
摘要: 一、登录MySQL 登录MySQL的命令是mysql, mysql 的使用语法如下:mysql [-u username] [-h host] [-p[password]] [dbname]username 与 password 分别是 MySQL 的用户名与密码,mysql的初始管理帐号是root 阅读全文
posted @ 2019-10-12 18:04 爱写bug的小猿 阅读(250) 评论(0) 推荐(0) 编辑
摘要: 1、检查是否安装 了vsftpd,如果未安装 则安装vsftpd。 1)查看系统中是否安装了vsftpd,可以通过执行命令 :rpm -qa | grep vsftpd 2)如果没有安装 vsftpd,则安装 :yum -y install vsftpd 2、创建ftp用户,比如ftpuser。命令 阅读全文
posted @ 2019-10-12 18:02 爱写bug的小猿 阅读(266) 评论(0) 推荐(0) 编辑
摘要: 所有节点操作 K8S的安装部署可以参考文档:http://m.bubuko.com/infodetail-3144195.html 需要在每一台机器上执行的操作 l 各节点禁用防火墙 # systemctl stop firewalld # systemctl disable firewalld l 阅读全文
posted @ 2019-10-12 18:01 爱写bug的小猿 阅读(3624) 评论(1) 推荐(0) 编辑
摘要: 首先安装docker-compose 在主节点创建一个目录es,并创建docker-compose.yaml,主节点yaml文件如下 version: '2' services: elasticsearch: image: docker.elastic.co/elasticsearch/elasti 阅读全文
posted @ 2019-10-12 17:59 爱写bug的小猿 阅读(1724) 评论(0) 推荐(0) 编辑
摘要: 1. 安装部署参考https://www.qikqiak.com/post/install-efk-stack-on-k8s/ 2. Fluentd对应的yaml配置方式,配置文件一般为fluentd-es-configmap.yaml 日志源配置 比如我们这里为了收集 Kubernetes 节点上 阅读全文
posted @ 2019-10-12 17:58 爱写bug的小猿 阅读(2079) 评论(0) 推荐(0) 编辑
摘要: 1. 首先在aws上通过k8s的node节点ami模板创建一个ec2实例 2. 实例创建好之后,从其他机器拷贝镜像包导入镜像,启动docker 启动kubelet等操作已经在启动实例时候启动 3. 在master节点上切换到root,分别执行命令生成sha256和token # openssl x5 阅读全文
posted @ 2019-10-12 17:57 爱写bug的小猿 阅读(1004) 评论(0) 推荐(0) 编辑
摘要: 1. 首先在aws上创建一台EC2实例,实例通过堡垒机登陆,创建方式参考如何在aws上创建EC2实例,并选用自己的秘钥对,我这边创建的话就直接用nwx-test秘钥对 2. 然后先用自己的用户登录到堡垒机 ssh niexx@xx.xx.xx.xx -p 50001 3. 登录堡垒机后上传自己的xx 阅读全文
posted @ 2019-10-12 17:56 爱写bug的小猿 阅读(689) 评论(0) 推荐(0) 编辑