摘要: 第一种方法:重新命名指定的列 df.rename(columns = {'环湖医院':'开滦医院', '普通医院':'三甲医院'}, inplace = True) 第二种方法:修改全部列名 df.columns = ['舒畅', '小舒畅', '舒小畅', '舒畅小'] 第三种方法:修改列名的一部 阅读全文
posted @ 2023-05-31 17:10 葫芦杯 阅读(4451) 评论(0) 推荐(0) 编辑
摘要: hive 元数据的数据模型 hive元数据的数据模型.png hive元数据的查用查询语句 通过中文字段找表 select d.NAME,a.TBL_NAME,e.PARAM_VALUE,c.COLUMN_NAME,c.TYPE_NAME,c.COMMENT,c.INTEGER_IDX from T 阅读全文
posted @ 2022-11-29 14:17 葫芦杯 阅读(301) 评论(0) 推荐(0) 编辑
摘要: 一、Hive下查看数据表信息的方法方法1:查看表的字段信息desc table_name; 方法2:查看表的字段信息及元数据存储路径desc extended table_name;方法3:查看表的字段信息及元数据存储路径desc formatted table_name;备注:查看表元数据存储路径 阅读全文
posted @ 2022-11-29 14:10 葫芦杯 阅读(1763) 评论(0) 推荐(0) 编辑
摘要: 用的方法# 方法一、使用grep命令#!/bin/sh str="/path/to/foo.txt" # 使用if语句if echo "$str" | grep -q -E '\.txt$'then echo "true"else echo "false"fi # 写成一行echo "$str" | 阅读全文
posted @ 2022-11-29 13:58 葫芦杯 阅读(902) 评论(0) 推荐(0) 编辑
摘要: 在UML类图中,常见的有以下几种关系: 泛化(Generalization), 实现(Realization),关联(Association),聚合(Aggregation),组合(Composition),依赖(Dependency)。 1、 继承关系—泛化(Generalization) 指的是 阅读全文
posted @ 2022-11-01 09:21 葫芦杯 阅读(75) 评论(0) 推荐(0) 编辑
摘要: 使用java连接ranger+ldap认证的hive,通过jdbc加上用户名密码即可,代码示例如下: import java.sql.*; public class JdbcHiveLdap { private static String driverName = "org.apache.hive. 阅读全文
posted @ 2022-10-20 09:49 葫芦杯 阅读(230) 评论(0) 推荐(0) 编辑
摘要: @ApiOperation不是spring自带的注解是swagger里的 com.wordnik.swagger.annotations.ApiOperation; @ApiOperation和@ApiParam为添加的API相关注解,个参数说明如下:@ApiOperation(value = “接 阅读全文
posted @ 2022-10-18 14:40 葫芦杯 阅读(395) 评论(0) 推荐(0) 编辑
摘要: 问题描述: 运行 python \xxx\datax.py \xxx\job.json控制台汉字显示乱码。 原因分析: window操作系统默认编码格式是gbk(963)编码,而在程序开发中我们统一的编码是 UTF-8。这样导致编码不一致,中文乱码! 解决方案: 临时更改: 命令:chcp (更改该 阅读全文
posted @ 2022-10-18 14:19 葫芦杯 阅读(207) 评论(0) 推荐(0) 编辑
摘要: 问题描述: 在python执行subprocess.Popen在win10下运行报740错误。 解决方法: 以管理员身份执行程序。 阅读全文
posted @ 2022-10-18 14:01 葫芦杯 阅读(123) 评论(0) 推荐(0) 编辑
摘要: 1.pop.xml配置 hive与hadoop的配置版本要匹配,一般hive 2.X版本要选择hadoop2.x版本,否则会不兼容 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifac 阅读全文
posted @ 2022-10-09 16:33 葫芦杯 阅读(1886) 评论(0) 推荐(0) 编辑