会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
sxfmol
价值分析助推高效决策
博客园
首页
新随笔
联系
订阅
管理
2010年4月14日
KETTLE——Weka处理大数据量内存溢出问题
摘要: 现在做的一个项目ETL采用KETTLE,通过Perl脚本进行分天表、月表及年表的创建,并修改KETTLE创建的抽取任务模板。即使这样在处理天表表近百万数据量时,Kettle也会有时发生内存溢出现象,导致抽取任务失败。今天发现了一哥们BLOG中的解决办法,特分享。以Spoon.bat为例,其他组件和.sh操作类似用文本编辑器打开Spoon.bat找到:REM ********************...
阅读全文
posted @ 2010-04-14 21:42 小司
阅读(2283)
评论(0)
推荐(0)
编辑