摘要: 1. 远程登录 无论是poweshell 还是xshell ssh yark@192.168.1.1 用户 地址 按enter 再输入密码 2.Linux 查找文件名包含 比如 com find / -name *com 或者com* 放中间 比如 tan\*860 加转义字符 3. 新建文件 -- 阅读全文
posted @ 2020-05-02 21:41 挪威森林猫Zzz 阅读(108) 评论(0) 推荐(0) 编辑
摘要: 1.分桶之前要打开 hive.enforce.bucketiong=true; 2.分桶处理的对象必须是有,有效的列 , 比如我分了三个桶,针对id , 那么就是取id的hash值 , 然后分别放入三个不同之中 ,注意 不能指定数据存放在哪个桶 , 他自己会根据哪个列判断 , 你只需要保证传入的数据 阅读全文
posted @ 2020-05-02 11:04 挪威森林猫Zzz 阅读(202) 评论(0) 推荐(0) 编辑
摘要: 1. mapper 分片 数量 解释 PS : 这里面还没有进行reduce 之前的shuffer , shuffer会把每个单词发送的不同的机器 , 假如有两个reduce , 那么相同颜色的都在一个节点上面 , 2. 3.reduce 之前必须shuffer 这是在有两个reducer的情况下 阅读全文
posted @ 2020-05-02 10:11 挪威森林猫Zzz 阅读(138) 评论(0) 推荐(0) 编辑