一瓢一瓢的饮

2023年5月

1、通过亿级数据量在hive和impala中查询比较text、orc和parquet性能表现（一）

摘要：文章目录一、结论二、三种文件简单介绍1、parquet2、text3、orc 三、需求四、实现步骤五、实现1、创建topic2、写入kafka topic t_kafka_flink_user 1亿条数据1）、pom.xml2)、代码1、bean2、生产者 3）、验证 3、将kafka topic 阅读全文

posted @ 2023-05-02 17:42 一瓢一瓢的饮阅读(350) 评论(0) 推荐(0)

24、hadoop系列博客文章质量调查

摘要： Hadoop系列文章目录 1、hadoop3.1.4简单介绍及部署、简单验证 2、HDFS操作 - shell客户端 3、HDFS的使用（读写、上传、下载、遍历、查找文件、整个目录拷贝、只拷贝文件、列出文件夹下文件、删除文件及目录、获取文件及文件夹属性等）-java 4、HDFS-java操作类HD 阅读全文

posted @ 2023-05-02 12:07 一瓢一瓢的饮阅读(8) 评论(0) 推荐(0)

2、SpringCloud子项目简介

摘要：文章目录一、spring cloud整体架构二、子项目介绍1、Spring Cloud Config2、Spring Cloud Netflix3、Spring Cloud Bus4、Spring Cloud Consul5、Spring Cloud Security6、Spring Cloud 阅读全文

posted @ 2023-05-02 08:46 一瓢一瓢的饮阅读(47) 评论(0) 推荐(0)

1、并发测试的几种简单方法

摘要：文章目录一、AB二、postman1、添加 Collection2、添加要测试的URL3、选中添加的Collection，设置运行时参数4、结果如下三、JMeter四、代码模拟五、Testng 并发测试1、注解方式2、配置文件方式本文介绍几种简单的并发测试方法。本文分为五部分，即ab、pos 阅读全文

posted @ 2023-05-01 18:08 一瓢一瓢的饮阅读(1260) 评论(0) 推荐(0)

23、hadoop集群中yarn运行mapreduce的内存、CPU分配调度计算与优化

posted @ 2023-05-01 17:44 一瓢一瓢的饮阅读(632) 评论(0) 推荐(0)

22、MapReduce使用Gzip压缩、Snappy压缩和Lzo压缩算法写文件和读取相应的文件

posted @ 2023-05-01 17:03 一瓢一瓢的饮阅读(671) 评论(0) 推荐(0)

21、MapReduce读写SequenceFile、MapFile、ORCFile和ParquetFile文件

posted @ 2023-05-01 14:54 一瓢一瓢的饮阅读(821) 评论(0) 推荐(0)

20、MapReduce 工作流介绍

posted @ 2023-05-01 14:12 一瓢一瓢的饮阅读(103) 评论(0) 推荐(0)

19、Join操作map side join 和 reduce side join

posted @ 2023-05-01 13:56 一瓢一瓢的饮阅读(385) 评论(0) 推荐(0)

18、MapReduce的计数器与通过MapReduce读取/写入数据库示例

posted @ 2023-05-01 12:04 一瓢一瓢的饮阅读(60) 评论(0) 推荐(0)

公告