会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
张飞的猪的技术总结
技术开发总结,v:张飞的猪
博客园
首页
新随笔
联系
订阅
管理
上一页
1
2
3
4
5
6
7
8
9
下一页
2023年7月24日
大数据面试题集锦-Hadoop面试题(五)-优化
摘要: > 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。如果你需要更多的面试经验和面试题,关注一下"张飞的猪大数据分享"吧,公众号会不定时的分享相关的知识和资料。 ## 1、MapReduce优化方法 1)数据输入 (1)合并小文件:在执行mr任务前将小文件进行合并,大量的小文件会产
阅读全文
posted @ 2023-07-24 08:14 张飞的猪
阅读(124)
评论(0)
推荐(0)
2023年7月10日
大数据面试题集锦-Hadoop面试题(四)-YARN
摘要: > 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。如果你需要更多的面试经验和面试题,关注一下"**张飞的猪大数据分享**"吧,公众号会不定时的分享相关的知识和资料。 [TOC] ## 1、为什么会产生 yarn,它解决了什么问题,有什么优势? 1)Yarn最主要的功能就是解决运
阅读全文
posted @ 2023-07-10 21:50 张飞的猪
阅读(97)
评论(0)
推荐(0)
2023年6月30日
大数据面试题集锦-Hadoop面试题(三)-MapReduce
摘要: > 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。如果你需要更多的面试经验和面试题,关注一下"张飞的猪大数据分享"吧,公众号会不定时的分享相关的知识和资料。 [TOC] ## 1、谈谈Hadoop序列化和反序列化及自定义bean对象实现序列化? 1)序列化和反序列化 (1)序列
阅读全文
posted @ 2023-06-30 20:23 张飞的猪
阅读(99)
评论(0)
推荐(0)
2023年6月21日
ClickHouse(14)ClickHouse合并树MergeTree家族表引擎之VersionedCollapsingMergeTree详细解析
摘要: 目录建表语法使用场景合并算法使用例子、资料分享系列文章clickhouse系列文章 VersionedCollapsingMergeTree引擎继承自MergeTree并将折叠行的逻辑添加到合并数据部分的算法中。VersionedCollapsingMergeTree用于相同的目的折叠树但使用不同的
阅读全文
posted @ 2023-06-21 10:50 张飞的猪
阅读(206)
评论(0)
推荐(0)
2023年6月1日
大数据面试题集锦-Hadoop面试题(二)-HDFS
摘要: > 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。如果你需要更多的面试经验和面试题,关注一下"张飞的猪大数据分享"吧,公众号会不定时的分享相关的知识和资料。 [TOC] ## 1、 HDFS 中的 block 默认保存几份? 默认保存3份 ## 2、HDFS 默认 BlockS
阅读全文
posted @ 2023-06-01 08:13 张飞的猪
阅读(187)
评论(0)
推荐(1)
2023年4月9日
大数据面试题集锦-Hadoop面试题(一)
摘要: 你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。 1、集群的最主要瓶颈 磁盘IO 2、Hadoop运行模式 单机版、伪分布式模式、完全分布式模式 3、Hadoop生态圈的组件并做简要描述 Zookeeper:是一个开源的分布式应用程序协调服务,基于zookeeper可以实现同步服
阅读全文
posted @ 2023-04-09 15:06 张飞的猪
阅读(247)
评论(0)
推荐(0)
2023年2月28日
ClickHouse(13)ClickHouse合并树MergeTree家族表引擎之CollapsingMergeTree详细解析
摘要: 目录建表折叠数据算法资料分享系列文章clickhouse系列文章 该引擎继承于MergeTree,并在数据块合并算法中添加了折叠行的逻辑。CollapsingMergeTree会异步的删除(折叠)这些除了特定列Sign有1和-1的值以外,其余所有字段的值都相等的成对的行。没有成对的行会被保留。因此,
阅读全文
posted @ 2023-02-28 22:09 张飞的猪
阅读(386)
评论(0)
推荐(1)
2023年2月6日
ClickHouse(12)ClickHouse合并树MergeTree家族表引擎之AggregatingMergeTree详细解析
摘要: 目录建表语法查询和插入数据数据处理逻辑ClickHouse相关资料分享系列文章clickhouse系列文章 AggregatingMergeTree引擎继承自 MergeTree,并改变了数据片段的合并逻辑。ClickHouse会将一个数据片段内所有具有相同主键(准确的说是排序键)的行替换成一行,这
阅读全文
posted @ 2023-02-06 20:04 张飞的猪
阅读(284)
评论(0)
推荐(0)
2023年1月16日
ClickHouse(11)ClickHouse合并树MergeTree家族表引擎之SummingMergeTree详细解析
摘要: 目录建表语法数据处理汇总的通用规则AggregateFunction 列中的汇总嵌套结构数据的处理资料分享系列文章clickhouse系列文章 SummingMergeTree引擎继承自MergeTree。区别在于,当合并SummingMergeTree表的数据片段时,ClickHouse会把所有具
阅读全文
posted @ 2023-01-16 21:18 张飞的猪
阅读(314)
评论(0)
推荐(0)
2022年12月26日
利用WordPress搭建属于自己的网站
摘要: 怎么用WordPress给自己搭建了一个网站?可能很多人都想拥有属于自己的网站,这篇文章就找你怎么利用WordPress搭建属于自己的网站。如果你也正好有搭建个人网站的想法,那么本文会给你一个参考,我尽量写的比较详细,给自己做一个记录,也给大家一个参考。 写在前面 在教程之前,先给大家show 一下
阅读全文
posted @ 2022-12-26 20:37 张飞的猪
阅读(1319)
评论(2)
推荐(2)
上一页
1
2
3
4
5
6
7
8
9
下一页
公告