2024年11月4日
Spark Streaming监听HDFS文件（Spark-shell）
摘要： 需求：编写程序利用Spark Streaming 监控HDFS 目录/input目录下的文件，并对上传的文件进行词频统计。 首先，linux中需要有netcat，来实现监听功能，有的linux会自带这个软件，可以用下面的命令测试一下，如果不报错就没问题，Ctrl+z可以退出 nc -l 9999 没 阅读全文
posted @ 2024-11-04 11:12 你这过氧化氢掺水了 阅读(10) 评论(0) 推荐(0) 编辑