112学习总结

sparkde四大特点

速度快:比hadoop的mapreduce快100倍;spark处理数据时,可以将中间处理结果存储到内存中;spark提供了非常丰富分算子,可以做到复杂任务在一个spark程序中完成
易于使用
通用性强:spark提供了spark sql、spark streaming、mlib及graphx在内的多个工具库
运行方式:spark支持多种运行方式,包括Hadoop和mesos上同时也支持standalone的独立运行模式,同时也可以运行在云kubernetes上;spark支持从hdfs、hbase、cassandra、kafka等多种途径获取数据

posted @   代不动码  阅读(6)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· Ollama——大语言模型本地部署的极速利器
· 使用C#创建一个MCP客户端
· 分享一个免费、快速、无限量使用的满血 DeepSeek R1 模型,支持深度思考和联网搜索!
· ollama系列1:轻松3步本地部署deepseek,普通电脑可用
· 按钮权限的设计及实现
点击右上角即可分享
微信分享提示