摘要: 导入依赖 <!-- https://mvnrepository.com/artifact/com.aliyun/dysmsapi20170525 --> <dependency> <groupId>com.aliyun</groupId> <artifactId>dysmsapi20170525</ 阅读全文
posted @ 2025-02-26 21:07 Xiaohu_BigData 阅读(15) 评论(0) 推荐(0) 编辑
摘要: package com.xiaohu.sink; import com.xiaohu.bean.WaterSensor; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.api.com 阅读全文
posted @ 2025-02-26 20:42 Xiaohu_BigData 阅读(24) 评论(0) 推荐(0) 编辑
摘要: 纯离线部署本地知识库LLM大模型 一、下载离线大模型 下载的网址:https://hf-mirror.com/ deepseek qwen 相关的模型,只建议使用1.5B的,GGUF后缀的模型 推荐下载llama相关模型,同样是GGUF后缀的,自己笔记本电脑推荐下载8B的 二、下载大模型管理平台 L 阅读全文
posted @ 2025-02-26 20:10 Xiaohu_BigData 阅读(696) 评论(0) 推荐(0) 编辑
摘要: The Elastic Stack, 包括 Elasticsearch、Kibana、Beats 和 Logstash(也称为 ELK Stack)。能够安全可靠地获取任何来源、任何格式的数据,然后实时地对数据进行搜索、分析和可视化。Elaticsearch,简称为 ES,ES 是一个开源的高扩展的 阅读全文
posted @ 2021-09-06 17:17 Xiaohu_BigData 阅读(686) 评论(0) 推荐(0) 编辑
摘要: 使用Kubeadm部署kubernetes集群 省略网络,hosts等相关配置 一、主机安全配置 1、关闭firewalld(每台机器) [root@XXX ~]# systemctl stop firewalld [root@XXX ~]# systemctl disable firewalld 阅读全文
posted @ 2020-11-09 09:52 Xiaohu_BigData 阅读(404) 评论(0) 推荐(0) 编辑
摘要: CentOS7搭建CDH5.16.2集群 HA高可用 机器准备:(这里HA是对HDFS和YARN的高可用) 主机名 cpu内存 bigdata-master01 8c32G bigdata-master02 8c32G bigdata-datanode01 8c16G bigdata-datanod 阅读全文
posted @ 2020-10-27 16:19 Xiaohu_BigData 阅读(945) 评论(0) 推荐(0) 编辑
摘要: package com.shujia.jinjie; import org.bouncycastle.crypto.modes.EAXBlockCipher; import redis.clients.jedis.Jedis; import java.io.*; import java.sql.Co 阅读全文
posted @ 2025-02-26 21:02 Xiaohu_BigData 阅读(17) 评论(0) 推荐(0) 编辑
摘要: package com.shujia.jinjie; import redis.clients.jedis.Jedis; import java.sql.Connection; import java.sql.PreparedStatement; import java.sql.ResultSet; 阅读全文
posted @ 2025-02-26 21:01 Xiaohu_BigData 阅读(2) 评论(0) 推荐(0) 编辑
摘要: package com.shujia.jinjie; import redis.clients.jedis.Jedis; import java.sql.Connection; import java.sql.PreparedStatement; import java.sql.ResultSet; 阅读全文
posted @ 2025-02-26 21:00 Xiaohu_BigData 阅读(6) 评论(0) 推荐(0) 编辑
摘要: Redis高级部分(集群,发布订阅) 1. Redis 主从复制 1.1 主从复制 主从复制架构仅仅用来解决数据的冗余备份,从节点仅仅用来同步数据 无法解决: 1.master节点出现故障的自动故障转移 1.2 主从复制架构图 1.3 搭建主从复制(做之前拍快照)(带同学们结合官网看redis7.0 阅读全文
posted @ 2025-02-26 20:59 Xiaohu_BigData 阅读(17) 评论(0) 推荐(0) 编辑
摘要: Redis持久化机制与位图api 1. 持久化机制 client redis[内存] > 内存数据- 数据持久化-->磁盘 Redis官方提供了两种不同的持久化方法来将内存的数据存储到硬盘里面分别是: 快照(Snapshot) AOF (Append Only File) 只追加日志文件 1.1 快 阅读全文
posted @ 2025-02-26 20:54 Xiaohu_BigData 阅读(10) 评论(0) 推荐(0) 编辑
摘要: Redis概述安装与基本数据类型 1. 什么是NoSQL NoSQL( Not Only SQL ),意即不仅仅是SQL, 泛指非关系型的数据库。Nosql这个技术门类,早期就有人提出,发展至2009年趋势越发高涨。 2. NoSQL的广泛应用 随着大数据的兴起,数据量的暴增,数据类型的丰富,传统的 阅读全文
posted @ 2025-02-26 20:52 Xiaohu_BigData 阅读(11) 评论(0) 推荐(0) 编辑
摘要: package com.xiaohu.sink; import org.apache.flink.configuration.Configuration; import org.apache.flink.streaming.api.datastream.DataStreamSource; impor 阅读全文
posted @ 2025-02-26 20:45 Xiaohu_BigData 阅读(27) 评论(0) 推荐(0) 编辑
摘要: package com.xiaohu.sink; import com.mysql.cj.jdbc.MysqlXADataSource; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink 阅读全文
posted @ 2025-02-26 20:45 Xiaohu_BigData 阅读(9) 评论(0) 推荐(0) 编辑
摘要: 自行修改对应数据库参数和配置 package com.xiaohu.sink; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.connector.jdbc.JdbcConnectio 阅读全文
posted @ 2025-02-26 20:44 Xiaohu_BigData 阅读(24) 评论(0) 推荐(0) 编辑
点击右上角即可分享
微信分享提示