会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
h4o3
博客园
首页
新随笔
联系
订阅
管理
2024年11月4日
Spark Streaming监听HDFS文件(Spark-shell)
摘要: 需求:编写程序利用Spark Streaming 监控HDFS 目录/input目录下的文件,并对上传的文件进行词频统计。 首先,linux中需要有netcat,来实现监听功能,有的linux会自带这个软件,可以用下面的命令测试一下,如果不报错就没问题,Ctrl+z可以退出 nc -l 9999 没
阅读全文
posted @ 2024-11-04 11:12 你这过氧化氢掺水了
阅读(12)
评论(0)
推荐(0)
编辑
公告