08 2022 档案

python中 x[:,0]和x[:,1] 理解和实例解析
摘要：x[m,n]是通过numpy库引用数组或矩阵中的某一段数据集的一种写法，m代表第m维，n代表m维中取第几段特征数据。 通常用法有两种... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(447) 评论(0) 推荐(0) 编辑
DBSCAN算法
摘要：1、DBSCAN概念 基于密度的带噪声的空间聚类应用算法，它是将簇定义为密度相连的点的大集合，能够把足够高密度的区域划分为簇，并且可... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(175) 评论(0) 推荐(0) 编辑
Roaring Bitmaps结构原理
摘要：一、简介 位图索引被广泛用于数据库和搜索引擎中，通过利用位级并行，它们可以显著加快查询速度。但是，位图索引会占用大量的内存，因此我们... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(145) 评论(0) 推荐(0) 编辑
BitMap数据结构和使用场景
摘要：一. BitMap Bit-map的基本思想就是用一个bit位来标记某个元素对应的Value，而Key即是该元素。由于采用了Bit为... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(226) 评论(0) 推荐(0) 编辑
缓慢变化维
摘要：一.什么是缓慢变化维？ 尽管维度的属性相对稳定，但他们不可能一成不变，随着时间的推移，属性值仍然会发生变化... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(172) 评论(0) 推荐(0) 编辑
doris常用的操作命令：
摘要：查询表结构: DESC table ALL;desc table; 查询版本号： select version(); 查询分区信息：... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(341) 评论(0) 推荐(0) 编辑
doris分区基本操作
摘要：创建分区： 分为两种： 1、Range 分区 分区列通常为时间列，以方便的管理新旧数据。Partition 支持通过 VALUES ... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(425) 评论(0) 推荐(0) 编辑
doris的三种数据模型
摘要：doris的三种数据模型： 一、Doris三种数据模型 Doris 的数据模型主要分为3类:- Aggregate- Uniq- D... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(795) 评论(0) 推荐(0) 编辑
hive的常用命令
摘要：hive的常用命令： 一、hive 管理表(内部表)与外部表的互相转换 1．修改外部表emp为内部表(emp为表名) alter t... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(190) 评论(0) 推荐(0) 编辑
hive 的like与rlike,not like,linke not,coalesce函数使用
摘要：1.关于like与rlike,not like,like not的使用对比总结 rlike功能和like功能大致一样，like是后面... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(604) 评论(0) 推荐(0) 编辑
hive hql去除数据中的空格内容
摘要：一、去除空格和tab的方法： 1、去除空格 用trim(只能将标准的英文空格删掉) 2、去除tab用如下方法 select rege... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(1388) 评论(0) 推荐(0) 编辑
hive shell查询时永久显示字段名和显示当前数据库
摘要：一、查询时显示字段名 1、进入hive cli后： set hive.cli.print.header=true; 2、此时显示的字... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(158) 评论(0) 推荐(0) 编辑
hive的性能调优
摘要：hive的性能调优 一.严格模式 通过设置以下参数开启严格模式： >set hive.mapred.mode=strict;【默... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(157) 评论(0) 推荐(0) 编辑
Kafka+Spark Streaming如何保证exactly once语义
摘要：在Kafka、Storm、Flink、Spark Streaming等分布式流处理系统中（没错，Kafka本质上是流处理系统，不是单... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(114) 评论(0) 推荐(0) 编辑
Hive创建表时添加中文注释后乱码问题
摘要：Hive创建表时添加COMMENT时的中文注释就会出现乱码，如下： 创建表： CREATE TABLE dws_vip_efecti... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(543) 评论(0) 推荐(0) 编辑
hive命令行显示当前数据库
摘要：在 hive命令行显示当前数据库两种方式。 1、可以在hive命令行执行以下语句显示当前数据库： hive> select curr... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(594) 评论(0) 推荐(0) 编辑
Hive自定义UDF、UDAF、UDTF函数实例与区别
摘要：Hive中有三种自定义函数 分类 1、用户定义函数(user-defined function)UDF; 2、用户定义聚集函数（u... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(660) 评论(0) 推荐(0) 编辑
比特币白皮书：一种点对点的电子现金系统
摘要：转自：http://www.8btc.com/wiki/bitcoin-a-peer-to-peer-electronic-cash-system[摘要]：本文提出了一种完全通过点对点技术实现的电子现金系统，它使得在线支付能够直接由一方发起并支付给另外一方，中... 阅读全文
posted @ 2022-08-23 19:59 lx991818 阅读(452) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示