摘要: 2. Spark MLib 2.1 Spark MLib 开发环境准备 2.1.1 配置python和spark环境 安装Python环境 安装Anaconda3-5.2.0-Windows-x86_64.exe 配置环境变量 Anaconda_HOME E:\20241014_Soft\Anaco 阅读全文
posted @ 2024-11-05 12:02 惊世智慧 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 1. OLAP可视化实现(需要提前整合版本) Linux121 Linux122 Linux123 jupyter ✔ spark ✔ ✔ ✔ python3+SuperSet3.0 ✔ hive ✔ ClinckHouse ✔ Kafka ✔ ✔ ✔ Phoenix ✔ DataX ✔ maxwe 阅读全文
posted @ 2024-11-05 11:59 惊世智慧 阅读(21) 评论(0) 推荐(0) 编辑
摘要: 安装Python环境 mkdir /opt/soft curl -O https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh bash Miniconda3-latest-Linux-x86_64.sh 回车之后,一 阅读全文
posted @ 2024-10-19 11:04 惊世智慧 阅读(59) 评论(0) 推荐(0) 编辑
摘要: 1. ZK集群,Hadoop集群,Hbase集群安装 Linux121 Linux122 Linux123 Hadoop ✔ ✔ ✔ MySQL ✔ ZK ✔ ✔ ✔ HBASE ✔ ✔ ✔ 1.1 安装Vmware,安装虚拟机集群 1.1.1 安装 (VMware-workstation-full 阅读全文
posted @ 2024-10-15 07:07 惊世智慧 阅读(28) 评论(0) 推荐(0) 编辑
摘要: 1. 租房 1.1 一定要避坑的地方: 千万不要找中介,安居客,唯心,房天下,基本上全部是中介和相应的公司,会很坑。 之前被坑在甲醛超标的房子里住了三个月,还有各种噪音和虫子。 在安居客上找的。 1.2 短租方案 临时过渡,可以找到相应的民宿,线下短租会比实际便宜大概五分之一,月租会便宜二分之一。 阅读全文
posted @ 2024-09-23 16:52 惊世智慧 阅读(88) 评论(0) 推荐(0) 编辑
摘要: 1. 搭建: 如何搭建一个普通的菠菜网站呢? 其实很简单,首选你需要获取供应商提供的api,支付系统,相应的组件,这些东西需要你去花钱购买。 08年开始,就有一批这些东西冒出来(ps:类似softGaming之类的站上面去买)。 然后写一个简单的前端页面,接入这些组件即可。 唯一的成本就这些组件。( 阅读全文
posted @ 2024-08-30 03:03 惊世智慧 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 1.解决方案1 经过一个多月的测试和方案调整,找到解决方案。 白噪音机+隔音耳罩 白噪音机目前选择:lectrofan evo 隔音耳罩目前选择: 3M x5a 2.解决方案2 如果公寓有噪音,可能不止是噪音,会有甲醛超标,虫子乱爬,装修材料污染等。 推荐直接退租。 钱是小事,命最重要。 阅读全文
posted @ 2024-08-27 07:25 惊世智慧 阅读(90) 评论(0) 推荐(1) 编辑
摘要: 3台机器部署kafka集群的分布 10.1.161.111 -> kafka(1个节点)+ zookeeper(一个节点)+ kowl(一个节点) 10.1.161.112 -> kafka(1个节点)+ zookeeper(一个节点) 10.1.161.113 -> kafka(1个节点)+ zo 阅读全文
posted @ 2024-05-07 09:16 惊世智慧 阅读(165) 评论(0) 推荐(0) 编辑
摘要: docker pull docker.io/truevoly/oracle-12c mkdir -p /usr/local/oracle/data_temp chmod 777 /usr/local/oracle/data_temp docker run --restart always -d -p 阅读全文
posted @ 2024-05-06 15:11 惊世智慧 阅读(43) 评论(0) 推荐(0) 编辑
摘要: 换桥接模式,换sealos 桥接模式 部署出问题了,用这个: ipconfig 以太网适配器 以太网: 连接特定的 DNS 后缀 . . . . . . . : 本地链接 IPv6 地址. . . . . . . . : fe80::29f9:1da9:30:3d48%8 IPv4 地址 . . . 阅读全文
posted @ 2024-04-29 18:25 惊世智慧 阅读(63) 评论(0) 推荐(0) 编辑
摘要: curl -fsSL https://get.docker.com | bash yum -y install docker-ce sudo systemctl start docker sudo systemctl enable docker mysql快速安装 sudo docker pull 阅读全文
posted @ 2024-04-29 18:19 惊世智慧 阅读(25) 评论(0) 推荐(0) 编辑
摘要: 数据量越大,硬件内核数越多,stream流相比传统for循环速度越快。 原因是stream流是可以并行处理的。 如果要使用stream流,可以直接用flatmap把外层嵌套扁平化,只留下自己需要处理的元素 示例: 点击查看代码 List<List<Integer>> nestedList = Arr 阅读全文
posted @ 2024-04-26 11:42 惊世智慧 阅读(12) 评论(0) 推荐(0) 编辑
摘要: 点击查看代码 下载deploy文件 https://github.com/kubernetes/ingress-nginx/blob/controller-v1.9.6/deploy/static/provider/cloud/deploy.yaml 修改deploy文件: 有如下几处可按需修改: 阅读全文
posted @ 2024-04-20 20:47 惊世智慧 阅读(86) 评论(0) 推荐(0) 编辑
摘要: 点击查看代码 丐版sqlserver集群 之前试过docker的,k8s的,然后发现,还是最朴素的是最简单的,希望有大佬能够汉化,他妈的,那些英文看得人要发癫啊。 前置准备,参照丐版pxc集群: https://www.cnblogs.com/zwnfdswww/p/18112077 如果不关防火墙 阅读全文
posted @ 2024-04-12 13:00 惊世智慧 阅读(257) 评论(0) 推荐(0) 编辑
摘要: 点击查看代码 同步 systemctl stop firewalld && systemctl disable firewalld systemctl stop NetworkManager && systemctl disable NetworkManager setenforce 0 sed - 阅读全文
posted @ 2024-04-09 14:47 惊世智慧 阅读(56) 评论(0) 推荐(0) 编辑
摘要: 因为我们用的是代理软件,所以虚拟网卡是不显现的。 在这种情况下,可以采用全局配置的模式,来解决这个问题,然后发现还是没用,尝试的解决方案是clush。 过程 获取宿主机的上网IP 10.1.161.207 配置代理 但是还是无法解决,docker镜像拉取的问题 最后找到的解决方案是,通过现有的镜像站 阅读全文
posted @ 2024-04-02 17:07 惊世智慧 阅读(6) 评论(0) 推荐(0) 编辑