摘要:
2022-03-21 08:00:01 阅读全文
摘要:
2022-03-20 08:00:01 阅读全文
摘要:
2022-03-19 14:53:02 阅读全文
摘要:
1、sqoop导数时,添加额外的配置参数sqoop export -Dorg.apache.sqoop.export.text.dump_data_on_error=true \ --username ${USERNAME} \ ......#其他的配置-Dorg.apache.sqoop.expo 阅读全文
摘要:
#修改分隔符为逗号 , ALTER TABLE table_name SET SERDEPROPERTIES ('field.delim' = ',' , 'serialization.format'=','); #修改分隔符为\001,在linux的vim中显示为^A,是hive默认的分隔符 AL 阅读全文
摘要:
在 mapred-site.xml文件中添加以下内容: <property> <name>yarn.app.mapreduce.am.env</name> <value>HADOOP_MAPRED_HOME=$HADOOP_COMMON_HOME</value></property><propert 阅读全文
摘要:
1.在虚拟机启动zookeeper和kafka,新建topic test1,这里使用的topic 是test1。 2.Scala程序 要修改 3.定义 Kafka 参数 中的主机名称以及要消费的topic名称 package scala.spark import org.apache.kafka.c 阅读全文
摘要:
insertoverwritetabledwd_base_event_log PARTITION(dt='2019-02-10') select mid_id, user_id, version_code, version_name, lang, source, os, area, model, b 阅读全文
摘要:
Exception in thread "SinkRunner-PollingRunner-DefaultSinkProcessor" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZL 阅读全文