Hive之set参数大全-7

指定 Hive LLAP（Live Long and Process）守护进程的委托令牌的生存期

在 Apache Hive 中，hive.llap.daemon.delegation.token.lifetime 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程的委托令牌的生存期。

以下是关于 hive.llap.daemon.delegation.token.lifetime 配置属性的一般信息：

配置属性： hive.llap.daemon.delegation.token.lifetime
默认值： 该属性的默认值通常为 86400000 毫秒（24小时）。
含义： 此属性指定了 LLAP 守护进程的委托令牌的生存期，即令牌的有效期。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.delegation.token.lifetime=86400000;

在这个示例中，通过 SET 语句将 hive.llap.daemon.delegation.token.lifetime 设置为 86400000 毫秒，即 24 小时。

调整委托令牌的生存期可能会影响 LLAP 守护进程中的安全性和权限管理。具体的设置取决于你的安全策略和集群配置。建议在进行更改之前了解你的安全需求，并确保令牌的生存期满足你的认证和授权需求。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定是否允许 Hive LLAP（Live Long and Process）守护进程下载永久函数

在 Apache Hive 中，hive.llap.daemon.download.permanent.fns 是一个配置属性，用于指定是否允许 Hive LLAP（Live Long and Process）守护进程下载永久函数。

以下是关于 hive.llap.daemon.download.permanent.fns 配置属性的一般信息：

配置属性： hive.llap.daemon.download.permanent.fns
默认值： 该属性的默认值通常为 false。
含义： 此属性指定是否允许 LLAP 守护进程下载永久函数。永久函数是指在 Hive 中定义的用户自定义函数（UDF）或用户自定义聚合函数（UDAF）。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.download.permanent.fns=false;

在这个示例中，通过 SET 语句将 hive.llap.daemon.download.permanent.fns 设置为 false，表示不允许 LLAP 守护进程下载永久函数。

永久函数的下载可能会影响查询执行的性能和资源利用。具体的设置可能取决于你的查询模式和数据特性。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程的日志记录器（logger）

在 Apache Hive 中，hive.llap.daemon.logger 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程的日志记录器（logger）。

以下是关于 hive.llap.daemon.logger 配置属性的一般信息：

配置属性： hive.llap.daemon.logger
默认值： 该属性的默认值通常为空，使用 LLAP 守护进程的默认日志记录器。
含义： 此属性指定了 LLAP 守护进程使用的日志记录器。日志记录器用于捕获和输出 LLAP 守护进程的日志信息。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.logger=org.apache.log4j.ConsoleAppender;

在这个示例中，通过 SET 语句将 hive.llap.daemon.logger 设置为 org.apache.log4j.ConsoleAppender，表示使用 ConsoleAppender 作为 LLAP 守护进程的日志记录器。

具体的日志记录器设置可能会根据你的日志需求和环境而有所不同。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中执行器（executors）的数量

在 Apache Hive 中，hive.llap.daemon.num.executors 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中执行器（executors）的数量。

以下是关于 hive.llap.daemon.num.executors 配置属性的一般信息：

配置属性： hive.llap.daemon.num.executors
默认值： 该属性的默认值通常为 1。
含义： 此属性指定了 LLAP 守护进程中执行器的数量。执行器是处理查询任务的工作单元。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.num.executors=1;

在这个示例中，通过 SET 语句将 hive.llap.daemon.num.executors 设置为 1，表示 LLAP 守护进程只使用一个执行器。

调整执行器的数量可能会影响 LLAP 守护进程的性能和资源利用。具体的设置可能取决于你的查询负载和硬件配置。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中的文件清理线程数量

在 Apache Hive 中，hive.llap.daemon.num.file.cleaner.threads 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中的文件清理线程数量。

以下是关于 hive.llap.daemon.num.file.cleaner.threads 配置属性的一般信息：

配置属性： hive.llap.daemon.num.file.cleaner.threads
默认值： 该属性的默认值通常为 2。
含义： 此属性指定了 LLAP 守护进程中用于文件清理的线程数量。文件清理线程负责删除不再需要的文件，以释放存储空间。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.num.file.cleaner.threads=2;

在这个示例中，通过 SET 语句将 hive.llap.daemon.num.file.cleaner.threads 设置为 2。

调整文件清理线程的数量可能会影响 LLAP 守护进程的性能和资源利用。具体的设置可能取决于你的查询负载和存储特性。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的最大挂起写入数量

在 Apache Hive 中，hive.llap.daemon.output.service.max.pending.writes 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中输出服务的最大挂起写入数量。

以下是关于 hive.llap.daemon.output.service.max.pending.writes 配置属性的一般信息：

配置属性： hive.llap.daemon.output.service.max.pending.writes
默认值： 该属性的默认值通常为 4096。
含义： 此属性指定了 LLAP 守护进程输出服务中最大允许的挂起写入数量。挂起写入是指尚未完成的写入操作。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.output.service.max.pending.writes=4096;

在这个示例中，通过 SET 语句将 hive.llap.daemon.output.service.max.pending.writes 设置为 4096。

调整最大挂起写入数量可能会影响 LLAP 守护进程的性能和资源利用。具体的设置可能取决于你的查询负载和硬件配置。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的端口号

在 Apache Hive 中，hive.llap.daemon.output.service.port 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中输出服务的端口号。

以下是关于 hive.llap.daemon.output.service.port 配置属性的一般信息：

配置属性： hive.llap.daemon.output.service.port
默认值： 该属性的默认值通常为 15000。
含义： 此属性指定了 LLAP 守护进程输出服务的端口号。输出服务用于处理查询的结果数据。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.output.service.port=15000;

在这个示例中，通过 SET 语句将 hive.llap.daemon.output.service.port 设置为 15000。

调整输出服务的端口号可能对 LLAP 守护进程的通信和连接产生影响。确保端口号不与其他服务冲突，并根据你的网络配置进行调整。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的发送缓冲区大小

在 Apache Hive 中，hive.llap.daemon.output.service.send.buffer.size 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中输出服务的发送缓冲区大小。

以下是关于 hive.llap.daemon.output.service.send.buffer.size 配置属性的一般信息：

配置属性： hive.llap.daemon.output.service.send.buffer.size
默认值： 该属性的默认值通常为 8192（以字节为单位）。
含义： 此属性指定了 LLAP 守护进程输出服务的发送缓冲区的大小。发送缓冲区用于暂存将要发送到客户端的数据。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.output.service.send.buffer.size=8192;

在这个示例中，通过 SET 语句将 hive.llap.daemon.output.service.send.buffer.size 设置为 8192 字节。

调整发送缓冲区的大小可能会影响 LLAP 守护进程输出服务的性能和网络通信。具体的设置可能取决于你的查询负载和网络特性。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中输出流的超时时间

在 Apache Hive 中，hive.llap.daemon.output.stream.timeout 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中输出流的超时时间。

以下是关于 hive.llap.daemon.output.stream.timeout 配置属性的一般信息：

配置属性： hive.llap.daemon.output.stream.timeout
默认值： 该属性的默认值通常为 300000 毫秒（即 5 分钟）。
含义： 此属性指定了 LLAP 守护进程输出流的超时时间。超时时间定义了在没有活动的情况下，LLAP 守护进程等待输出流的时间。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.output.stream.timeout=300000;

在这个示例中，通过 SET 语句将 hive.llap.daemon.output.stream.timeout 设置为 300000 毫秒。

调整输出流的超时时间可能对 LLAP 守护进程的性能和响应时间产生影响。具体的设置可能取决于你的查询负载和环境条件。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中的远程过程调用 (RPC) 处理程序的数量

在 Apache Hive 中，hive.llap.daemon.rpc.num.handlers 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中的远程过程调用 (RPC) 处理程序的数量。

以下是关于 hive.llap.daemon.rpc.num.handlers 配置属性的一般信息：

配置属性： hive.llap.daemon.rpc.num.handlers
默认值： 该属性的默认值通常为 40。
含义： 此属性指定了 LLAP 守护进程中用于处理远程过程调用的处理程序的数量。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.rpc.num.handlers=40;

在这个示例中，通过 SET 语句将 hive.llap.daemon.rpc.num.handlers 设置为 40。

调整 RPC 处理程序的数量可能会影响 LLAP 守护进程的性能和并发处理能力。具体的设置可能取决于你的查询负载和硬件配置。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程的远程过程调用 (RPC) 服务端口

在 Apache Hive 中，hive.llap.daemon.rpc.port 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程的远程过程调用 (RPC) 服务端口。

以下是关于 hive.llap.daemon.rpc.port 配置属性的一般信息：

配置属性： hive.llap.daemon.rpc.port
默认值： 该属性的默认值通常为 15002。
含义： 此属性指定了 LLAP 守护进程用于 RPC 服务的端口号。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.rpc.port=15002;

在这个示例中，通过 SET 语句将 hive.llap.daemon.rpc.port 设置为 15002。

调整 RPC 服务端口的设置可能会影响 LLAP 守护进程的通信和连接。确保端口号不与其他服务冲突，并根据你的网络配置进行调整。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中服务刷新的间隔时间

在 Apache Hive 中，hive.llap.daemon.service.refresh.interval.sec 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中服务刷新的间隔时间。

以下是关于 hive.llap.daemon.service.refresh.interval.sec 配置属性的一般信息：

配置属性： hive.llap.daemon.service.refresh.interval.sec
默认值： 该属性的默认值通常为 30 秒。
含义： 此属性指定了 LLAP 守护进程中服务刷新的间隔时间。服务刷新用于更新 LLAP 服务的状态信息。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.service.refresh.interval.sec=30;

在这个示例中，通过 SET 语句将 hive.llap.daemon.service.refresh.interval.sec 设置为 30 秒。

调整服务刷新的间隔时间可能会影响 LLAP 守护进程的性能和状态更新速度。具体的设置可能取决于你的监控需求和集群配置。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定是否启用 Hive LLAP（Live Long and Process）守护进程中的 shuffle 目录监视器

在 Apache Hive 中，hive.llap.daemon.shuffle.dir.watcher.enabled 是一个配置属性，用于指定是否启用 Hive LLAP（Live Long and Process）守护进程中的 shuffle 目录监视器。

以下是关于 hive.llap.daemon.shuffle.dir.watcher.enabled 配置属性的一般信息：

配置属性： hive.llap.daemon.shuffle.dir.watcher.enabled
默认值： 该属性的默认值通常为 true。
含义： 此属性指定了是否启用 LLAP 守护进程中的 shuffle 目录监视器。shuffle 目录监视器用于监视任务的中间数据（shuffle 数据）的产生和使用。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.shuffle.dir.watcher.enabled=true;

在这个示例中，通过 SET 语句将 hive.llap.daemon.shuffle.dir.watcher.enabled 设置为 true，表示启用 shuffle 目录监视器。

启用 shuffle 目录监视器可能对 LLAP 守护进程的性能和资源利用产生影响，具体效果取决于查询的性质和数据特性。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

指定 Hive LLAP（Live Long and Process）守护进程中任务抢占（preemption）度量的间隔时间

在 Apache Hive 中，hive.llap.daemon.task.preemption.metrics.intervals 是一个配置属性，用于指定 Hive LLAP（Live Long and Process）守护进程中任务抢占（preemption）度量的间隔时间。

以下是关于 hive.llap.daemon.task.preemption.metrics.intervals 配置属性的一般信息：

配置属性： hive.llap.daemon.task.preemption.metrics.intervals
默认值： 该属性的默认值通常为 30000 毫秒（即 30 秒）。
含义： 此属性指定了 LLAP 守护进程中用于任务抢占度量的间隔时间。任务抢占是指根据资源需求和优先级主动杀死某些正在运行的任务，以便为更高优先级的任务腾出资源。

在 Hive 配置文件（通常是 hive-site.xml）中，你可以进行如下配置：

SET hive.llap.daemon.task.preemption.metrics.intervals=30000;

在这个示例中，通过 SET 语句将 hive.llap.daemon.task.preemption.metrics.intervals 设置为 30000 毫秒。

调整任务抢占度量的间隔时间可能会影响 LLAP 守护进程的性能和任务管理效率。具体的设置可能取决于你的查询负载和任务调度需求。建议在进行更改之前进行测试和评估。确保查看你所使用的 Hive 版本的官方文档，以获取最准确的配置信息。

配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器是否启用任务抢占（preemption）功能

在Apache Hive中，hive.llap.daemon.task.scheduler.enable.preemption 是一个配置属性，用于配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器是否启用任务抢占（preemption）功能。

以下是使用SQL语言设置此属性的示例：

-- 启用任务抢占
SET hive.llap.daemon.task.scheduler.enable.preemption=true;

或者，如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.task.scheduler.enable.preemption</name>
  <value>true</value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

请注意，如果将值设置为 false，则禁用任务抢占。在某些情况下，可能需要根据集群和查询需求来调整此配置。确保查看相关版本的Hive文档以获取更多详细信息。

配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器等待队列的大小

hive.llap.daemon.task.scheduler.wait.queue.size 是Apache Hive中的一个配置属性，用于配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器等待队列的大小。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP任务调度器等待队列的大小
SET hive.llap.daemon.task.scheduler.wait.queue.size=<desired_size>;

将 <desired_size> 替换为您想要设置的等待队列的大小。这个值通常是一个正整数，表示队列中可以等待的任务数。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.task.scheduler.wait.queue.size</name>
  <value><desired_size></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

请注意，对于这种类型的配置，最佳值可能取决于您的集群规模、负载特性和性能需求。确保查看相关版本的Hive文档以获取更多详细信息。

配置LLAP（Low Latency Analytical Processing）守护进程每个实例的虚拟CPU数量

hive.llap.daemon.vcpus.per.instance 是Apache Hive中的一个配置属性，用于配置LLAP（Low Latency Analytical Processing）守护进程每个实例的虚拟CPU数量。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程每个实例的虚拟CPU数量
SET hive.llap.daemon.vcpus.per.instance=<desired_count>;

将 <desired_count> 替换为您希望为每个LLAP守护进程实例配置的虚拟CPU数量。这个值通常是一个正整数。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.vcpus.per.instance</name>
  <value><desired_count></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

请注意，对于这种类型的配置，最佳值可能取决于您的集群规模、硬件配置和性能需求。确保查看相关版本的Hive文档以获取更多详细信息。

指定LLAP（Low Latency Analytical Processing）守护进程等待队列中任务的比较器类名

hive.llap.daemon.wait.queue.comparator.class.name 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程等待队列中任务的比较器类名。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程等待队列中任务的比较器类名
SET hive.llap.daemon.wait.queue.comparator.class.name=<comparator_class_name>;

将 <comparator_class_name> 替换为您希望使用的比较器类的完整类名。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.wait.queue.comparator.class.name</name>
  <value><comparator_class_name></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

这个配置属性允许您指定LLAP守护进程等待队列中任务的排序方式，从而影响任务的调度顺序。确保查看相关版本的Hive文档以获取更多详细信息，并了解可用的比较器类及其用途。

指定LLAP（Low Latency Analytical Processing）守护进程的Web服务端口号

hive.llap.daemon.web.port 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程的Web服务端口号。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程的Web服务端口号
SET hive.llap.daemon.web.port=<desired_port>;

将 <desired_port> 替换为您希望为LLAP守护进程的Web服务配置的端口号。这个值通常是一个未被占用的端口号，例如，15002。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.web.port</name>
  <value><desired_port></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

这个配置属性定义了LLAP守护进程的Web UI访问的端口。确保查看相关版本的Hive文档以获取更多详细信息。

指定LLAP（Low Latency Analytical Processing）守护进程的Web服务是否启用SSL（Secure Sockets Layer）

hive.llap.daemon.web.ssl 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程的Web服务是否启用SSL（Secure Sockets Layer）。

以下是使用SQL语言设置此属性的示例：

-- 启用LLAP守护进程的Web服务SSL
SET hive.llap.daemon.web.ssl=true;

如果您希望禁用SSL，可以将值设置为 false：

-- 禁用LLAP守护进程的Web服务SSL
SET hive.llap.daemon.web.ssl=false;

这个属性用于确定LLAP守护进程的Web服务是否使用加密协议，以确保通过Web UI的通信是安全的。SSL通常在生产环境中用于加密数据传输，防止中间人攻击等安全问题。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.web.ssl</name>
  <value>true</value> <!-- 或者 false，根据需要设置 -->
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

确保查看相关版本的Hive文档以获取更多详细信息。SSL配置通常还涉及到其他SSL相关的属性，例如证书和密钥的配置。

指定LLAP（Low Latency Analytical Processing）守护进程的Java虚拟机（JVM）堆内存的额外保留空间

hive.llap.daemon.xmx.headroom 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程的Java虚拟机（JVM）堆内存的额外保留空间。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程的JVM堆内存额外保留空间
SET hive.llap.daemon.xmx.headroom=<desired_headroom>;

将 <desired_headroom> 替换为您希望为LLAP守护进程的JVM堆内存配置的额外保留空间。这个值通常以字节或者带有单位（如MB、GB）的数字表示。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.xmx.headroom</name>
  <value><desired_headroom></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

这个属性用于控制LLAP守护进程的堆内存管理，确保在处理大量数据时能够有效利用内存，并避免内存不足的问题。请注意，设置这个属性需要考虑到集群的硬件配置和LLAP的实际工作负载。确保查看相关版本的Hive文档以获取更多详细信息。

指定LLAP（Low Latency Analytical Processing）守护进程的YARN容器分配的内存大小

hive.llap.daemon.yarn.container.mb 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程的YARN容器分配的内存大小。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程的YARN容器内存分配大小
SET hive.llap.daemon.yarn.container.mb=<desired_memory>;

将 <desired_memory> 替换为您希望为LLAP守护进程的YARN容器分配的内存大小。这个值通常以MB为单位。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.yarn.container.mb</name>
  <value><desired_memory></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

这个属性用于控制LLAP守护进程在YARN集群上运行时每个容器的分配内存。确保考虑集群的硬件配置和LLAP实际工作负载，以便设置合适的内存大小。查看相关版本的Hive文档以获取更多详细信息。

指定LLAP（Low Latency Analytical Processing）守护进程的YARN shuffle服务端口

hive.llap.daemon.yarn.shuffle.port 是Apache Hive中的一个配置属性，用于指定LLAP（Low Latency Analytical Processing）守护进程的YARN shuffle服务端口。

以下是使用SQL语言设置此属性的示例：

-- 设置LLAP守护进程的YARN shuffle服务端口
SET hive.llap.daemon.yarn.shuffle.port=<desired_port>;

将 <desired_port> 替换为您希望为LLAP守护进程的YARN shuffle服务配置的端口号。这个值通常是一个未被占用的端口号，例如，15003。

如果您想在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.daemon.yarn.shuffle.port</name>
  <value><desired_port></value>
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

这个属性定义了LLAP守护进程用于处理YARN shuffle服务的端口。确保查看相关版本的Hive文档以获取更多详细信息。

启用或禁用LLAP（Low Latency Analytical Processing）中的Grace Hash Join优化

hive.llap.enable.grace.join.in.llap 是Apache Hive中的一个配置属性，用于启用或禁用LLAP（Low Latency Analytical Processing）中的Grace Hash Join优化。

以下是使用SQL语言设置此属性的示例：

-- 启用Grace Hash Join优化
SET hive.llap.enable.grace.join.in.llap=true;

如果要禁用Grace Hash Join优化，可以将值设置为 false：

-- 禁用Grace Hash Join优化
SET hive.llap.enable.grace.join.in.llap=false;

这个属性控制LLAP引擎中的连接操作优化，Grace Hash Join 是一种优化技术，它允许更大的表在内存中构建哈希表，提高连接操作的性能。

如果您希望在Hive的配置文件（通常是 hive-site.xml）中进行永久设置，可以添加以下配置：

<property>
  <name>hive.llap.enable.grace.join.in.llap</name>
  <value>true</value> <!-- 或者 false，根据需要设置 -->
</property>

将上述XML片段添加到Hive配置文件中，并重新启动Hive服务以使更改生效。

请查看相关版本的Hive文档以获取更多详细信息。确保了解这个配置属性的影响，以及在不同场景下的最佳设置。

posted @ 2024-01-08 21:28 OnePandas 阅读(39) 评论(0) 编辑收藏举报

刷新页面返回顶部

OnePandas

Hive之set参数大全-7

指定 Hive LLAP（Live Long and Process） 守护进程的委托令牌的生存期

指定是否允许 Hive LLAP（Live Long and Process） 守护进程下载永久函数

指定 Hive LLAP（Live Long and Process） 守护进程的日志记录器（logger）

指定 Hive LLAP（Live Long and Process） 守护进程中执行器（executors）的数量

指定 Hive LLAP（Live Long and Process） 守护进程中的文件清理线程数量

指定 Hive LLAP（Live Long and Process） 守护进程中输出服务的最大挂起写入数量

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的端口号

指定 Hive LLAP（Live Long and Process） 守护进程中输出服务的发送缓冲区大小

指定 Hive LLAP（Live Long and Process）守护进程中输出流的超时时间

指定 Hive LLAP（Live Long and Process） 守护进程中的远程过程调用 (RPC) 处理程序的数量

指定 Hive LLAP（Live Long and Process）守护进程的远程过程调用 (RPC) 服务端口

指定 Hive LLAP（Live Long and Process）守护进程中服务刷新的间隔时间

指定是否启用 Hive LLAP（Live Long and Process） 守护进程中的 shuffle 目录监视器

指定 Hive LLAP（Live Long and Process）守护进程中任务抢占（preemption）度量的间隔时间

配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器是否启用任务抢占（preemption）功能

配置LLAP（Low Latency Analytical Processing）守护进程的任务调度器等待队列的大小

配置LLAP（Low Latency Analytical Processing）守护进程每个实例的虚拟CPU数量

指定LLAP（Low Latency Analytical Processing）守护进程等待队列中任务的比较器类名

指定LLAP（Low Latency Analytical Processing）守护进程的Web服务端口号

指定LLAP（Low Latency Analytical Processing）守护进程的Web服务是否启用SSL（Secure Sockets Layer）

指定LLAP（Low Latency Analytical Processing）守护进程的Java虚拟机（JVM）堆内存的额外保留空间

指定LLAP（Low Latency Analytical Processing）守护进程的YARN容器分配的内存大小

指定LLAP（Low Latency Analytical Processing）守护进程的YARN shuffle服务端口

启用或禁用LLAP（Low Latency Analytical Processing）中的Grace Hash Join优化

公告

指定 Hive LLAP（Live Long and Process）守护进程的委托令牌的生存期

指定是否允许 Hive LLAP（Live Long and Process）守护进程下载永久函数

指定 Hive LLAP（Live Long and Process）守护进程的日志记录器（logger）

指定 Hive LLAP（Live Long and Process）守护进程中执行器（executors）的数量

指定 Hive LLAP（Live Long and Process）守护进程中的文件清理线程数量

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的最大挂起写入数量

指定 Hive LLAP（Live Long and Process）守护进程中输出服务的发送缓冲区大小

指定 Hive LLAP（Live Long and Process）守护进程中的远程过程调用 (RPC) 处理程序的数量

指定是否启用 Hive LLAP（Live Long and Process）守护进程中的 shuffle 目录监视器