摘要:
1,玩具,玩具手枪,28888.2,122,玩具,遥控汽车,3222.0,53,玩具,洋娃娃,68.0,84,玩具,遥控飞机,3222.0,65,电器,风扇,55.8,106,电器,空调,99999.2,37,电器,平底锅,666.0,1 1 import lombok.AllArgsConstru 阅读全文
摘要:
//查看topics./kafka-topics.sh --zookeeper hadoop106:2181 --list //查看topic状态./kafka-topics.sh --zookeeper hadoop106:2181 --topic test --describe //创建一个发布 阅读全文
摘要:
前提 按照前一篇文章,配置了kafka。但是研发删除topic还是标记marked for deletion。 过程 1.首先删除各个kafka节点的数据目录的该topic的数据,检查发现已经被删除。 2.连接zookeeper,彻底删除topic(此处以t_f为例),需要删除zookeeper中三 阅读全文
摘要:
kafka 节点无法启动kafak 节点启动kafak 节点启动问题: 今天 kafka 启动时 有两个节点突然挂掉了 ,怎么也启动不起来一般问题出在配置文件的参数:~/kafka/config/server.properties解决:1.配置文件问题server.properties 调整分发后分 阅读全文
摘要:
linux中 -daemon、&、nohup指这三者的区别w, who am I, tty守护进程与后台进程的区别w, who am I, tty w可得到当前用户的所有终端名称; who am I与tty都可得到当前登录的终端是哪个12w : who am I : tty : 守护进程 daemo 阅读全文
摘要:
提交spark应用到yarn集群上的时候在跑一段时间就会出现这个报错: 根据上面的报错原因分析是因为集群资源不够,集群的自我保护机制使hdfs处于安全模式,然后我用”hdfs dfsadmin -safemode leave“命令让集群恢复到可用模式但是在提交到集群时还是会报错同样的错误 然后就查找 阅读全文
摘要:
https://www.cnblogs.com/liujiaxin2018/p/13068691.html 1、首先使用vim编辑器创建一个测试数据 a.txt,如下: 2、使用 如下命令查看中间的空隙是空格还是tab键: sed -n l a.txt 3、使用如下命令测试: sed 's/ \+/ 阅读全文
摘要:
任务提交指令: spark-submit --class orderinversioninspark.RelativeFrequency ~/soft/temp/bigdataAnalysis.jar 2 /input/inputfile.txt /outputfi 异常部分信息如下: Except 阅读全文