摘要: Python操作MySQL的常用方式。 1. 获取MySQL连接 2. 查询数据记录 3. 向MySQL插入数据 阅读全文
posted @ 2019-06-05 16:35 笨小康u 阅读(438) 评论(0) 推荐(0) 编辑
摘要: 1. python操作MySQL数据库的依赖包MySQLdb 安装方式: 2. Python操作Hive的依赖包pyhs2 安装方式: 阅读全文
posted @ 2019-06-05 16:31 笨小康u 阅读(1060) 评论(0) 推荐(0) 编辑
摘要: 在使用 pyenv 版本管理工具时激活虚拟环境报错 报错信息: 执行 which python3 命令提示无法找到。 解决办法: 终端执行如下操作临时生效 将以上内容添加到 ~/.bashrc,并通过 source ~/.bashrc 生效环境变量。 阅读全文
posted @ 2019-06-04 20:40 笨小康u 阅读(6133) 评论(0) 推荐(0) 编辑
摘要: 一、定时删除linux上定时的文件 显示20分钟前的文件 find /tmp/ -type f -mmin +20 -exec ls -l {} \; 删除20分钟前的文件 find /tmp/ -type f -mmin +20 -exec rm {} \; 显示20天前的文件 find /tmp 阅读全文
posted @ 2019-05-23 11:49 笨小康u 阅读(1467) 评论(0) 推荐(0) 编辑
摘要: 批量处理思路在工作中使用的频率比较高,比如批量清理进程、批量删除文件、批量机器执行脚本等。 一、批量清理带java字样的进程 方式1:使用shell while语法。 shell while 方式直观,可处理相对复杂的逻辑,通用性高。 方式2:使用 xargs 参数 xargs 方式使用简洁,可进行 阅读全文
posted @ 2019-03-03 18:12 笨小康u 阅读(1779) 评论(0) 推荐(0) 编辑
摘要: 重试机制在实际编程场景中应用比较场景,比如你的任务在请求一个正在写入数据但不确定什么时间会完成的文件,可能就需要通过尝试机制间隔一段时间重新执行任务。 以下 shell 脚本是实现重试机制的模板: 阅读全文
posted @ 2019-03-03 17:37 笨小康u 阅读(5110) 评论(0) 推荐(0) 编辑
摘要: 背景:MySQL编码是utf-8,MySQL中建库建表中文显示都正常,但在Hive窗口中建表时字段中文注释均乱码的问题。 问题:Hive中建表后字段中文注释显示异常。 1. 定位 MySQL 端问题 查看 MySQL 字符集编码 MySQL 中新建表中文注释显示正常 由此可以定位到并不是 MySQL 阅读全文
posted @ 2019-02-18 21:36 笨小康u 阅读(3625) 评论(0) 推荐(0) 编辑
摘要: 1. Cloudera Management Service服务全部无法启动 观察到的现象: (1)cm service 组件无法启动,启动时服务请求超时终止;(2)主机信息也无法获取到,一直提示“无法与服务端取得联系”(3)cm-server日志中提示“Authentication failure 阅读全文
posted @ 2019-01-29 11:06 笨小康u 阅读(3730) 评论(0) 推荐(0) 编辑
摘要: Python 中数据类型主要有四种:列表、元组、字典、集合。 一、列表 List 二、元组 Tuple 三、字典 Dictionary 四、集合 Set 【参考资料】 [1] 廖雪峰, Python 教程. 阅读全文
posted @ 2019-01-08 21:31 笨小康u 阅读(227) 评论(0) 推荐(0) 编辑
摘要: Python 版本 3.x,Python IDE环境:PyCharm + Anaconda 本文主要是学习 Python 基础语法。 一、输入与输出 input() 是 python 3.x 的输入函数,%name 表示变量的值,因为 name 是字符串类型,故前面用 %s 代替。 二、判断语句:i 阅读全文
posted @ 2018-12-21 22:38 笨小康u 阅读(411) 评论(0) 推荐(0) 编辑