摘要: mongoDB学习 一、NoSQL介绍 1.NoSQL 简介 NoSQL(NoSQL = Not Only SQL ),意即"不仅仅是SQL",指的是非关系型的数据库,是对不同于传统的关系型数据库的数据库管理系统的统称。 在现代的计算系统上每天网络上都会产生庞大的数据量。 这些数据有很大一部分是由关 阅读全文
posted @ 2020-08-19 14:39 王顺子 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 一、Filebeat收集单个日志 1.配置收集日志到文件 [root@web01 ~]# vim /etc/filebeat/filebeat.yml filebeat.inputs: - type: log enable: true paths: - /var/log/nginx/access.l 阅读全文
posted @ 2020-08-19 14:38 王顺子 阅读(581) 评论(0) 推荐(0) 编辑
摘要: 一、Lostash将数据收集到Redis 1.准备环境 主机 IP 部署的服务 web01 172.16.1.7 nginx,tomcat,logstash db01 172.16.1.51 es,kibana,redis db02 172.16.1.52 es db03 172.16.1.53 e 阅读全文
posted @ 2020-08-19 14:36 王顺子 阅读(149) 评论(0) 推荐(0) 编辑
摘要: 一、Logstash收集日志 1.Logstash的配置文件 [root@web01 ~]# vim /etc/logstash/logstash.yml path.config: /etc/logstash/conf.d 2.logstash收集日志文件到文件 [root@web01 ~]# vi 阅读全文
posted @ 2020-08-19 14:31 王顺子 阅读(148) 评论(0) 推荐(0) 编辑
摘要: ELK学习 一、ELK介绍 1.什么是ELK ELK是三个软件 1.E:elasticsearch java程序 存储,查询日志 2.L: logstash java程序 收集、过滤日志 3.K: kibana java程序 提供web服务,将数据页面化 4.F: filebeat go 收集、过滤 阅读全文
posted @ 2020-08-13 14:25 王顺子 阅读(154) 评论(0) 推荐(0) 编辑
摘要: 一、集群 1.集群搭建 1.时间同步 2.安装Java环境 3.安装ES 4.配置ES 5.启动ES 2.集群的特点 1.集群中的数据不论在哪一台机器操作,都可以看到 2.使用插件连接任意一台机器,都能看到三个节点 3.数据会自动分配到多个节点 4.如果主分片所在节点挂掉,副本节点的分片会自动升为主 阅读全文
posted @ 2020-08-13 14:24 王顺子 阅读(156) 评论(0) 推荐(0) 编辑
摘要: 一、跟ES交互的方式 1.使用curl命令 #建立索引 [root@db01 ~]# curl -XPUT 'http://10.0.0.51:9200/test' #插入数据 [root@db01 ~]# curl -XPUT 'localhost:9200/student/user/1?pret 阅读全文
posted @ 2020-08-13 14:23 王顺子 阅读(259) 评论(0) 推荐(0) 编辑
摘要: Elasticsearch 学习 搜索引擎式数据库 一、生活中的数据 1.生活中的数据分类 1)结构化数据 行数据,以二维表的形式展示的数据 2)非结构化数据 没有具体结构,视频,文本,音乐文件 3)半结构化数据 xml表格办公软件,HTML 2.搜索的种类 1)结构化数据搜索 结构化数据有固定结构 阅读全文
posted @ 2020-08-10 14:43 王顺子 阅读(303) 评论(0) 推荐(0) 编辑
摘要: 一、redis主从 1.redis主从原理 1.从库配置主从同步 2.从库像主库发起sync命令 3.主库接收sync命令,执行bgsave,生成持久化rdb文件 4.主库将新的数据临时写入缓冲区 5.主库将rdb文件推送至从库 6.从库接收到rdb文件,会清空自己的数据 7.从库读取并导入rdb文 阅读全文
posted @ 2020-08-06 16:23 王顺子 阅读(184) 评论(0) 推荐(0) 编辑
摘要: 一、数据类型 1.string类型 key value 2.hash类型 key field value field value 3.list类型 key value value value 4.集合类型 key {member,member,member} 5.有序集合 1.集合类型 #对比集合的 阅读全文
posted @ 2020-08-05 14:29 王顺子 阅读(126) 评论(0) 推荐(0) 编辑