2017年3月16日
spark dataframe操作集锦（提取前几行，合并，入库等）
摘要： Spark dataframe派生于RDD类，但是提供了非常强大的数据操作功能。当然主要对类SQL的支持。 在实际工作中会遇到这样的情况，主要是会进行两个数据集的筛选、合并，重新入库。 首先加载数据集，然后在提取数据集的前几行过程中，才找到limit的函数。 而合并就用到union函数，重新入库，就 阅读全文
posted @ 2017-03-16 14:28 dy9776 阅读(24602) 评论(0) 推荐(0) 编辑