码出个世界

导航

2022年7月26日 #

hive简单加密

摘要: select '66666666' t,encode('66666666' ,'UTF-8') t1 -- 存储hadoop字段类型binary,base64(cast('66666666' as binary)) t2 -- 存储hadoop字段类型string,md5('66666666') t 阅读全文

posted @ 2022-07-26 11:40 码出个世界 阅读(367) 评论(0) 推荐(0) 编辑

HDFS读数据流程

摘要: (1)客户端通过 DistributedFileSystem 向 NameNode 请求下载文件,NameNode 通过查 询元数据,找到文件块所在的 DataNode 地址。 (2)挑选一台 DataNode(就近原则,然后随机)服务器,请求读取数据。 (3)DataNode 开始传输数据给客户端 阅读全文

posted @ 2022-07-26 09:40 码出个世界 阅读(106) 评论(0) 推荐(0) 编辑