08 2019 档案

摘要:背景 想使用api的方式去访问公司内部azkaban平台,https站点,azkaban的官方api文档使用的curl语句,如下: curl -k -X POST --data "action=login&username=azkaban&password=azkaban" https://loca 阅读全文
posted @ 2019-08-16 14:42 whendream 阅读(960) 评论(0) 推荐(0)
摘要:基本概念 map-reduce1.0 例子: hadoop streaming -input <path> 输入数据路径 -output <path> 输出数据路径 -mapper <cmd|JavaClassName> mapper可执行程序或Java类 -reducer <cmd|JavaCla 阅读全文
posted @ 2019-08-14 19:54 whendream 阅读(477) 评论(0) 推荐(0)
摘要:背景 python执行操作系统的命令,如python执行shell命令 subprocess模块主要用于创建子进程,并连接它们的输入、输出和错误管道,获取它们的返回状态。通俗地说就是通过这个模块,你可以在Python的代码里执行操作系统级别的命令,比如“ipconfig”、“du -sh”等等。 操 阅读全文
posted @ 2019-08-06 10:22 whendream 阅读(522) 评论(0) 推荐(0)