会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
h4o3
博客园
首页
新随笔
联系
订阅
管理
随笔 - 21
文章 - 0
评论 - 12
阅读 -
2968
2024年11月4日
Spark Streaming监听HDFS文件(Spark-shell)
摘要: 需求:编写程序利用Spark Streaming 监控HDFS 目录/input目录下的文件,并对上传的文件进行词频统计。 首先,linux中需要有netcat,来实现监听功能,有的linux会自带这个软件,可以用下面的命令测试一下,如果不报错就没问题,Ctrl+z可以退出 nc -l 9999 没
阅读全文
posted @ 2024-11-04 11:12 你这过氧化氢掺水了
阅读(42)
评论(0)
推荐(0)
编辑
公告
昵称:
你这过氧化氢掺水了
园龄:
9个月
粉丝:
3
关注:
1
+加关注
常用链接
我的随笔
我的评论
我的参与
最新评论
我的标签
合集
(3)
大数据(11)
计算机考研(2)
人工智能(6)
阅读排行榜
1. 制作一个ai丛雨(附Python代码)(652)
2. Python数据爬取处理可视化,手把手全流程教学(385)
3. 计组常见名词缩写(247)
4. 基于Hadoop实现的对历年四级单词的词频分析(入门级Hadoop项目)(211)
5. K-Means聚类分析以及误差平方和SSE(Python实现)(168)
点击右上角即可分享