12 2020 档案
摘要：解决办法参考： HDP3.1中spark2.3无法读取Hive3.0数据 问题描述：ambari部署的spark和hive，在sparksql中执行insert into table xxx partition(dt='xxx') select xxx from xxx where dt='xxx'
阅读全文
摘要：在使用海康威视dll登录到网络摄像机时错误如下： 一个解决办法： 取消勾选“首选32位”
阅读全文
摘要：参考：https://blog.csdn.net/happylin0x29a/article/details/8855716 问题原因：为了优化读取parquet格式文件，spark默认选择使用自己的解析方式读取数据，结果读出的数据就有问题。 解决办法：将配置项spark.sql.hive.conv
阅读全文
摘要：若DataFrame为简单的二维表，则可以借助RDD的zipWithIndex实现索引列添加。 scala> val df = spark.createDataFrame(Seq(("ming",20,1234),("hong",19,1235),("zhi",21,1236))) scala> d
阅读全文
