摘要：
循环 python 循环语句有for循环和while循环。 for循环 阅读全文
摘要：
1.打开cmd，输入命令找到配置文件路径 2.打开 jupyter_notebook_config.py 修改配置 c.NotebookApp.notebook_dir为自己的工作目录 3.修改Jupyter Notebook快捷方式属性 找到Jupyter Notebook快捷方式，右键 属性 修 阅读全文
摘要：
清华镜像2019.6.15已恢复 中科大镜像2019.7.1停机维护后恢复 1.打开anaconda prompt 2.添加清华镜像1：https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/ 3.添加清华镜像2：https://mirrors 阅读全文
摘要：
在有些情况下需要使用main使用Spring bean，但是main方法启动并没有托管给Spring管理，会导致bean失败,报空指针异常。 可以使用 ClassPathXmlApplicationContext 加载配置文件，获获取bean： 阅读全文
摘要：
sqoop要实现增量导入参数到hive或者hdfs 1.需要在mysql中创建可以自动更新的字段，当插入数据时和更新数据时改字段自动更新，如图中update_time,当数据插入时会记录更新为插入时间，数据更新时会更新为数据更新时的时间 `update_time` timestamp NULL DE 阅读全文
摘要：
sqoop要使用别名模式隐藏密码 1.首先使用命令创建别名 hadoop credential create xiaopengfei -provider jceks://hdfs/user/password/xiaopengfei 说明： create 指定创建的别名 -provider jceks 阅读全文
摘要：
没搭建私服的情况下引入本地的jar，并把本地jar打包进项目的run jar 以打包引入hadoop-common-2.7.5.jar为例 引用 复制jar包所在的路径 打开cmd命令提示符 切换路径到jar所在的目录 e: cd E:\迅雷下载\hadoop-2.7.5\share\hadoop\ 阅读全文
摘要：
impala函数支持不行，能处理的问题域有一定的限制，与Hive配合使用,对Hive的结果数据集进行实时分析 impala_jdbc下载地址: https://downloads.cloudera.com/connectors/impala_jdbc_2.5.42.1062.zip https:// 阅读全文