2018年10月17日
Http接口获取数据写入Hdfs
摘要： 数据源类型：数组列表 1. 定义http数据源链接 2. 定义hdfs链接配置 3. 定义泛型类用于传送http的内容到hdfs 这里存在一点小问题：由于json是数组列表，所以需要获取每条记录，然后加入换行符号\n写入hdfs。这样在hive中查询才能获取到多个记录。否则会全部当作一条记录。 4. 阅读全文
posted @ 2018-10-17 18:52 硅谷工具人 阅读(2420) 评论(0) 推荐(1) 编辑
成功之道，在于每个人生阶段都要有不同的目标，并且通过努力实现自己的目标，毕竟人生不过百年! 所有奋斗的意义在于为个人目标实现和提升家庭幸福，同时能推进社会进步和国家目标! 正如古人讲的正心诚意格物致知，修身齐家治国平天下。