Hive官方使用手册——新Hive CLI(Beeline CLI)
摘要：Hive官方使用手册——新Hive CLI(Beeline CLI) https://blog.csdn.net/maizi1045/article/details/79481686
阅读全文
posted @ 2018-12-26 16:48
12 2018 档案
pyspark遇到报错：_PYSPARK_DRIVER_CONN_INFO_PATH
摘要：1. 环境 : centos，启动pyspark，执行如下python命令： 用root账号没问题: 用非root账号会有此问题如下：_PYSPARK_DRIVER_CONN_INFO_PATH，后台设置下/etc/profile 中环境变量可以了。 vi /etc/profile 加入：，sour
阅读全文
posted @ 2018-12-26 11:45
python 运行日志logging代替方案
摘要：以下是自己写的 记录日志的代码。（和logging不搭嘎，如果如要学loggging模块，本文末尾有他人的链接。） 同目录下生成1.log 运行prtlog.py3次，运行b.py3次. 1.log内容: 如需了解logging: (转)python logging模块 ★★， python中log
阅读全文
posted @ 2018-12-14 11:47
pandas使用lambda判断元素是否为空或者None
摘要：df2a_tp2 = df2a[df2a['combineIdentifyCode'].map(lambda x: len(str(x).strip())>0)].copy() #识别出合单的订单[pd.isnull(i[0]['trp_vehicleNumber']) for i in dfMatch_5_c[0:20]]
阅读全文
posted @ 2018-12-11 15:29
windows安装配置git和Tortoisegit
摘要：git github gitlab Tortoisegit 的概念自行百度 1. 安装git 2. 安装小乌龟：Tortoisegit 和中文包 3. 配置 4. 使用 参考： Git与TortoiseGit基本操作
阅读全文
posted @ 2018-12-07 15:31
重装windows系统后配置Anaconda
摘要：给电脑换了系统，十分担心anaconda需要重装。还好以下方法完美解决。（同是win10 64位） 原始anaconda安装路径：D:\ProgramData\Anaconda3 （不能有空格哦） 一、添加环境变量 D:\ProgramData\Anaconda3 （有Python.exe,Pyth
阅读全文
posted @ 2018-12-05 19:26
