2022年2月8日
Spark 读取HDFS csv文件并写入hive
摘要： package com.grady import org.apache.spark.SparkConf import org.apache.spark.sql.{Row, SaveMode, SparkSession} /** * csv 文件数据写入hive */ object CsvToHive 阅读全文
posted @ 2022-02-08 17:48 明月照江江 阅读(675) 评论(0) 推荐(0) 编辑
spark 读取hive 计算后写入hive
摘要： package com.grady import org.apache.spark.SparkConf import org.apache.spark.sql.{DataFrame, Row, SparkSession} object HiveTableToTable { def main(args 阅读全文
posted @ 2022-02-08 17:45 明月照江江 阅读(223) 评论(0) 推荐(0) 编辑
Spark 读Hive并写入HBase
摘要： package com.grady import org.apache.hadoop.hbase.HBaseConfiguration import org.apache.hadoop.hbase.client.Put import org.apache.hadoop.hbase.io.Immuta 阅读全文
posted @ 2022-02-08 17:29 明月照江江 阅读(258) 评论(0) 推荐(0) 编辑
Spark 读 Hbase
摘要： package com.grady import org.apache.hadoop.hbase.HBaseConfiguration import org.apache.hadoop.hbase.client.Result import org.apache.hadoop.hbase.io.Imm 阅读全文
posted @ 2022-02-08 16:58 明月照江江 阅读(159) 评论(0) 推荐(0) 编辑
Spark 写 Hbase
摘要： package com.grady import org.apache.hadoop.hbase.HBaseConfiguration import org.apache.hadoop.hbase.client.{Put, Result} import org.apache.hadoop.hbase 阅读全文
posted @ 2022-02-08 16:30 明月照江江 阅读(126) 评论(0) 推荐(0) 编辑