04 2022 档案

Linux 关闭9999端口号
摘要：查看端口号 netstat -tunl 查询9999pid netstat -apn | grep 9999 关闭 sudo fuser -k -n tcp 9999 阅读全文
posted @ 2022-04-28 07:08 御本美琴初号机 阅读(349) 评论(0) 推荐(0) 编辑
Spark ==》 发送接收json数据并分析
摘要：题目一：以下为学生期末考试的部分数据，请按要求完成统计，格式如下{"name":"zhangsan","sex":"m",”kemu”:”yuwen”,"score":66} 1) 创建kafka主题ods_score_topic,要求一个备份，一个分区 2) 创建生产者，往主题里添加15条以上数据 阅读全文
posted @ 2022-04-26 15:25 御本美琴初号机 阅读(100) 评论(0) 推荐(0) 编辑
Flink==》window窗口简单练习
摘要：数据 sensors2,1,1650866635 sensors2,2,1650866636 sensors2,3,1650866633 sensors2,4,1650866641 sensors2,5,1650866642 sensors4,6,1650866634 sensors4,7,1650 阅读全文
posted @ 2022-04-26 11:43 御本美琴初号机 阅读(31) 评论(0) 推荐(0) 编辑
jps.sh
摘要：kafka >kafka spark >{ Master 主节点 Woker 副节点 } zookeeper >{ QuorumPeerMain } hadoop >{ NodeManager SecondaryNameNode NameNode //管理 DateNode //存储数据 } 阅读全文
posted @ 2022-04-24 21:12 御本美琴初号机 阅读(19) 评论(0) 推荐(0) 编辑
spark、IDEA ，接收端口9999数据进行单词统计
摘要：本文基于官网：Spark 流式处理 - Spark 2.4.1 文档 (apache.org) 在linux一台机器上使用此命令： nc -lk 9999 如果没有此命令，使用 yum install nc 下载 在linux端简单数据数据，IDEA端开启数据接收，统计单词数量 import org 阅读全文
posted @ 2022-04-20 21:28 御本美琴初号机 阅读(113) 评论(0) 推荐(0) 编辑
大数据 基础配置 （jdk,hadoop,zookeeper,kafka）
摘要：版本如下： jdk: jdk1.8.0_131 mysql: 5.5.54 hadoop: 2.8.1 zookeeper:3.4.10 kafka: 2.11-2.4.1网盘链接 链接: https://pan.baidu.com/s/1XUhqSbKnzREBOTo5W_gl1Q 提取码: rf 阅读全文
posted @ 2022-04-19 15:03 御本美琴初号机 阅读(81) 评论(0) 推荐(0) 编辑
大数据linux创建集群
摘要：（这里创建的集群为三个虚拟机） 首先创建一个虚拟机，然后克隆两个 1.修改ip地址 vim /etc/sysconfig/network-scripts/ifcfg-ens33 一般文件名都为 ifcfg-ens33 也有可能是别的 我这里已经将第一台的ip地址设置为默认了，大家可以根据我这个来设置 阅读全文
posted @ 2022-04-19 12:05 御本美琴初号机 阅读(58) 评论(0) 推荐(0) 编辑
Spark sql 连续登录例题
摘要：2021/05/18 10.3.9.18 tianqi 1006 error 2021/05/18 10.7.5.56 lisi 1002 warning 2021/05/18 194.23.67.23 wangwu 1003 normal 2021/05/18 111.202.103.60 zha 阅读全文
posted @ 2022-04-12 00:04 御本美琴初号机 阅读(81) 评论(0) 推荐(0) 编辑

阅读目录(Content)

此页目录为空

点击右上角即可分享
微信分享提示