RICH-ATONE

摘要： Hadoop中NameNode的工作机制 阅读全文

摘要： 实时数仓搭建与实时分析调研 阅读全文

摘要： Error: java.io.IOException: Can't export data, please check failed map task logs at org.apache.sqoop.mapreduce.TextExportMapper.map(TextExportMapper.j 阅读全文

摘要： 项目管理实战 第一章：项目管理实战（引论） 第二章：项目管理实战（项目运行环境） 第三章：项目经理角色 为什么说你的数据团队需要一个项目管理型人才？ 数据团队如何为自己争取资源 < 评论分析： 我最近也一直在思考数据团队价值方面的事情，我感觉这是绝大部分公司里大数据部门共同的痛点。在有权利分配资源的 阅读全文

摘要： 我在滴滴数据分析岗的面试和实习经历 如何用数据分析驱动用户增长 阅读全文

摘要： 1.委任新节点 注： 新增完节点去HDFS页面进行查看节点状态，是否在服务中，如果状态为Decommissioned（退役）状态， 则检验次节点是否包含在exclude文件中，如果存在，则删除，再次进行刷新节点操作（在namenode节点进行操作） 2.解除旧节点 ps：涉及到的刷新及更改文件操作， 阅读全文

摘要： 测试九次后以失败而告终，望评论 2020-11-20 15:24:13,326 [uber-SubtaskRunner] ERROR org.apache.sqoop.tool.ImportTool - Encountered IOException running import job: java 阅读全文

摘要： sqoop command sqoop命令可以通过command和arg标签组成。 当使用command元素时，oozie将会按照空格切分命令，作为参数。因此当你使用query的时候，就不能用command了！ 当使用arg的时候，每个arg都是一个参数。 所有的参数部分，都可以使用EL表达式。 参 阅读全文

摘要： 常用配置： bin/sqoop import \ --connect jdbc:mysql://ip:3306/database?tinyInt1isBit=false \ --username xxx \ --password xxx \ --table xxx \ --xxx \ --num-m 阅读全文

摘要： Apriori两个重要原理： 1.如果一个集合是频繁项集，则它的所有子集都是频繁项集。假设一个集合{A,B}是频繁项集，则它的子集{A}, {B} 都是频繁项集。 2.如果一个集合不是频繁项集，则它的所有超集都不是频繁项集。假设集合{A}不是频繁项集，则它的任何超集如{A,B}，{A,B,C}必定也 阅读全文