摘要:
本地运行报错信息 Exception in thread "main" java.lang.NullPointerException: Cannot find compatible factory for specified execution.target (=local) at org.apac 阅读全文
摘要:
HBase- 安装单机版HBase 下载安装 tar -xvzf hbase-1.2.1-bin.tar.gz 配置HBase配置文件 $HBASE_HOME/conf hbase-env.sh export JAVA_HOME=/opt/app/jdk/ export HBASE_MANAGES_ 阅读全文
摘要:
Linux软件配置 源配置 1.阿里云源配置官网:http://mirrors.aliyun.com 2.源配置步骤 (1)备份 (2)下载CentOS Base.repo到/etc/yum.repos.d/,下载方式 (3)运行yum makecache生成缓存 JDK安装 1.清理系统默认自带的 阅读全文
只有注册用户登录后才能阅读该文。 阅读全文
摘要:
用Anaconda安装的python 版本无法更新pip导致不能安装第三方库: 用Anaconda Prompt安装第三方库: 解决方法: 阅读全文
摘要:
直接上代码 打包报错 这是一个很长的信息,说主题需要设置[字符串],而不是设置[字符]。 我能看到解决这个问题的最佳方法是: 但是,如果你真的只有一个主题,那么只需按照上面的Set(topics)将字符串拆分成一组单个字符。 阅读全文
摘要:
spark streaming 打包将全部依赖打进去,运行jar包报错:如下 解决方式:只将有需要的包打进去,因为spark的lib下已经有很多jar包,不需要我们重复打进jar包,只需要把lib没有的jar包打进去运行就好。因为包的重复引用会导致生成多个MF文件 阅读全文
摘要:
我们遇到个特别的需求,一个数据接入的流程跑的太慢,需要升级为用大数据方式去处理,提高效率。 数据: 数据csv文件用Zip 压缩后放置在SFTP中 数据来源: SFTP 数据操作: 文件和它的压缩包一致,后缀不同。文件名中包含渠道、日期、操作标记("S"追加,"N"全量,"D"删除) 升级前的操作方 阅读全文
摘要:
普通类,我们平时见到的那种类,就是一个后缀为.java的文件中,直接定义的类,比如 内部类, 内部类。顾名思义,就是包含在外部类中的类,就叫内部类。内部类有两种,一种是静态内部类,一种是非静态内部类。 静态内部类和非静态内部类的区别主要如下: 1、内部原理的区别: 静态内部类是属于外部类的成员, 是 阅读全文
摘要:
一,数据插入MySql中出现中文乱码 解决办法有: 1。新建数据库选择 2。建表的时候: 3 ?useUnicode=true&;characterEncoding=UTF-8 阅读全文