会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
数据驱动
博客园
首页
新随笔
联系
订阅
管理
2020年7月15日
大数据基础---大数据调优汇总
摘要: 前言 不进行优化的代码就是耍流氓。 总体来说大数据优化主要分为三点,一是充分利用CPU,二是节省内存,三是减少网络传输。 一、Hive/MapReduce调优 1.1 本地模式 Hive默认采用集群模式进行计算,如果对于小数据量,可以设置为单台机器进行计算,这样可以大大缩减查询触发任务时间。 用户可
阅读全文
posted @ 2020-07-15 23:17 数据驱动
阅读(2207)
评论(0)
推荐(0)
编辑
公告