所向披靡zz - 博客园

2024年2月2日

摘要：实测发现在sqlserver中查询语句，数据字段末尾存在空格用等于号也可以查询出来例如where CarNumber=‘粤A23435’ 和 where CarNumber='粤A23435 ’ 查询出来的结果一样，sqlserver会忽视字符串末尾的空格原因：空字符和空格都不占用存储空间，阅读全文

posted @ 2024-02-02 11:25 所向披靡zz 阅读(232) 评论(0) 推荐(0) 编辑

hive sql标准

摘要： Hive 的查询语言 HQL 支持 SQL-92 标准（SQL92是数据库的一个ANSI/ISO标准），这与 SQL 非常类似，因此 Hive 会被误解当成关系型数据库。但是，Hive 和关系型数据库除了查询语句类似外，再无相似之处，两者的区别如下表所示：对比项 Hive RMDBS查询语句 HQL 阅读全文

posted @ 2024-02-02 11:22 所向披靡zz 阅读(82) 评论(0) 推荐(0) 编辑

2024年1月24日

mysql客户端安装

摘要： mysql客户端：https://blog.51cto.com/u_16175497/7167970 阅读全文

posted @ 2024-01-24 09:18 所向披靡zz 阅读(2) 评论(0) 推荐(0) 编辑

2024年1月23日

namenode内存过大的危害

摘要： 1、启动时间变长。NameNode的启动过程可以分成FsImage数据加载、editlogs回放、Checkpoint、DataNode的BlockReport几个阶段。数据规模较小时，启动时间可以控制在~10min以内，当元数据规模达到5亿（Namespace中INode数超过2亿，Block数接阅读全文

posted @ 2024-01-23 11:54 所向披靡zz 阅读(39) 评论(0) 推荐(0) 编辑

hadoop垃圾回收

摘要：开启回收站之后，删除的文件会送进回收站，等待超时后再彻底删除，这样子方便恢复原数据，起到防止误删除、备份等作用。本质上是将文件放在特定目录存储，跟windows的回收站功能一样。单位是min 参数说明： 1、默认值fs.trash.interval = 0，0表示禁用回收站；其他值表示设置文件的存阅读全文

posted @ 2024-01-23 11:49 所向披靡zz 阅读(83) 评论(0) 推荐(0) 编辑

hadoop优化namenode内存优化

摘要： Namenode内存配置在Hadoop2.x里，如何配置NameNode内存？NameNode默认内存2000M。如果你的服务器内存是4G，那一般可以把NN内存设置成3G，留1G给服务器维持基本运行（如系统运行需要、DataNode运行需要等）所需就行。在hadoop-env.sh文件中设置：HA 阅读全文

posted @ 2024-01-23 11:47 所向披靡zz 阅读(135) 评论(0) 推荐(0) 编辑

hivesql报错：java.net.SocketTimeoutException: Read timed out

摘要：场景：在dolphin里面执行hivesql脚本，报错java.net.SocketTimeoutException: Read timed out 解决方式： hive.metastore.client.socket.timeout=1000s 扩展： "Hive报Read timed out" 阅读全文

posted @ 2024-01-23 10:05 所向披靡zz 阅读(342) 评论(0) 推荐(0) 编辑

2024年1月17日

datax安装

摘要：安装前提： jdk1.8 python2以上 http://datax-opensource.oss-cn-hangzhou.aliyuncs.com/datax.tar.gzhttps://blog.csdn.net/qq_25112523/article/details/109276687htt 阅读全文

posted @ 2024-01-17 16:18 所向披靡zz 阅读(12) 评论(0) 推荐(0) 编辑

python2安装

摘要： Python 2.7.5 https://blog.51cto.com/u_16175486/7582020 阅读全文

posted @ 2024-01-17 16:17 所向披靡zz 阅读(2) 评论(0) 推荐(0) 编辑

2024年1月10日

Linux设置开机自动运行脚本的方法

摘要：原文链接：https://zhuanlan.zhihu.com/p/615571684 阅读全文

posted @ 2024-01-10 19:10 所向披靡zz 阅读(11) 评论(0) 推荐(0) 编辑

公告