摘要: 1、需要插入多条数据,一天一条,time的格式为yyyy-mm-dd 00:00:00 使用pandas插件包, 取某一段时间的日粒度, 然后进行日期格式化,使用strftime 2、每条开头有唯一性表示的id,uuid,观察其格式为大写,且没有短横线,所以写法为id=uuid.uuid1().he 阅读全文
posted @ 2022-12-27 10:34 hushuer 阅读(797) 评论(0) 推荐(0) 编辑
摘要: 1、使用正则表达式,将','后面的所有内容替换为空。 2、每一行末尾加上分号 因为notepad换行之后,每一行的末尾是自带了一个小空格的,光标在某行末尾时看不到,但是拖动到下一行的时候就可以看到。 光标从某行末尾拖动鼠标到下一行开头,来选中这个小空格,ctrl+c,然后ctrl+f打开替换框,这时 阅读全文
posted @ 2022-11-23 18:00 hushuer 阅读(1997) 评论(0) 推荐(0) 编辑
摘要: 本来一开始使用的time.sleep(5),但是执行时间长了之后,会与实际时间有偏差,因为没有计算程序本身运行的时间。 解决: 使用blockingScheduler 将send()这个方法,每5s执行一次: 阅读全文
posted @ 2022-11-23 16:46 hushuer 阅读(641) 评论(0) 推荐(0) 编辑
摘要: 参考:https://www.w3school.com.cn/sql/func_date_format.asp 与oracle 的to_date()字符串转日期,to_char()日期转字符串不同, mysql与hive使用date_format()进行日期格式转换 hive中,需要注意yyyy-m 阅读全文
posted @ 2022-11-23 16:10 hushuer 阅读(726) 评论(0) 推荐(0) 编辑
摘要: 参考:https://blog.csdn.net/idomyway/article/details/78785112 对于oracle数据库,必须使用to_date函数才能操作日期字段。(to_date():将我们写的字符串格式的时间,转为日期格式) 举例1,筛选某个时间范围的值,时间格式为24小时 阅读全文
posted @ 2022-11-23 15:51 hushuer 阅读(589) 评论(0) 推荐(0) 编辑
摘要: 由于有时hive的某张表字段太多,如果直接使用命令行查询,展示的数据会换行,非常凌乱,不便于查看,所以需要使用工具。 类似这种查询结果,字段名称就有七八行。 pycharm或者idea都可以,但是社区版的不支持。。 创建连接非常简单,缺少驱动时会自动下载。 需注意连接的ip地址,如果你的环境是分布式 阅读全文
posted @ 2022-11-23 11:57 hushuer 阅读(922) 评论(0) 推荐(0) 编辑
摘要: 原因:开了charles代理,就算点击了停止代理按钮,也不行,只有退出charles之后,才会恢复正常。 看网上也有人遇到类似的问题,不过是因为请求地址跨域之类的, 总结,遇到这个报错,大概问题就是请求地方发生了变化这样的原因。 阅读全文
posted @ 2022-11-14 10:25 hushuer 阅读(1063) 评论(0) 推荐(0) 编辑
摘要: 有时在内网,无法使用jmeter的pluginManager直接下载插件。 解决方法: 1、在外网的jmeter使用pluginManager直接下载插件; 2、从外网jmeter的lib/ext文件中,按更新时间排序,复制最新时间的下载好的插件安装包jar文件到内网对应的位置; 3、重启内网的jm 阅读全文
posted @ 2022-11-11 15:09 hushuer 阅读(1073) 评论(0) 推荐(0) 编辑
摘要: 1、redis——AnotherRedisDesktopManager 比RedisDesktopManager好用,后者经常会出现,刷新后数据会重复展示等问题。 2、MongoDB——Robo 3T 3、mqtt——paho.exe 可以进行mqtt的数据收发 4、kafka——Kafka Too 阅读全文
posted @ 2022-11-07 14:39 hushuer 阅读(75) 评论(0) 推荐(0) 编辑
摘要: 理解: 始终拿0位置的值,依次与后面位置的进行比较; 比较时,谁小,谁就放在0位置 阅读全文
posted @ 2022-11-07 12:03 hushuer 阅读(13) 评论(0) 推荐(0) 编辑