09 2019 档案
摘要：如何看查询计划? 若一个查询表现出很差的性能，查看查询计划可能有助于找到问题点。下面是 一些需要查看的东西： 计划中是否有一个操作花费时间超长？ 查询计划中是否有一个操作花费 了大部分的处理时间？例如，如果一个索引扫描比预期的时间超长，也许 该索引已经处于过期状态，需要考虑重建索引。还可临时尝试
阅读全文
摘要：问题描述： 使用Cloudera-Manager-Installer.bin安装过程中，意外中断。当你重新安装时，提示已经安装了CM，请先卸载。 尝试使用 sudo /usr/share/cmf/uninstall-cloudera-manager.sh命令卸载失败，提示找不到 mojosetup/
阅读全文
摘要：元数据库设计到的服务：scm库：server hive库：hive amon库：cloudera management服务 元数据库要从5.7.24升级到5.7.25，为了避免升级失败导致 集群不可用，我们计划在另一个节点安装5.7.25数据库，然后导入数据，并完成cm数据库切换。 1.关闭hive
阅读全文
摘要：目录 概述 1、greenplum gpcheckperf 命令参数说明 2、gpcheckperf 参数详解 3 gpcheckperf 测试脚本 4、gpcheckperf 测试结果 5、查看产生的文件 6、测试gpsdw2和gpsdw1再次测试 7、测试结果分析 概述 1、在以下测试时要在集群
阅读全文
摘要：（转） 原文链接：https://www.cnblogs.com/nmap/p/10779658.html 环境介绍 centos7.3和centos7.6升级完毕测试登录ssh以及重启后登录ssh均无问题。 前期请自行配置好yum源（如果不会请百度） 整个过程不需要卸载原先的openssl包和op
阅读全文
摘要：这里有一个简单的例子： $ echo 'abcabcabc' | sed 's/\(ab\)c/\1/' ababcabc $ echo 'abcabcabc' | sed 's/\(ab\)c/\1/g' ababab $ echo 'abcabcabc' | sed 's/\(ab\)\(c\)
阅读全文
摘要：https://www.cnblogs.com/clsn/p/8006210.html
阅读全文
摘要：(转) 作为linux中最为常用的三大文本（awk，sed，grep）处理工具之一，掌握好其用法是很有必要的。 首先谈一下grep命令的常用格式为：grep [选项] ”模式“ [文件] grep家族总共有三个：grep，egrep，fgrep。 常用选项： -E ：开启扩展（Extend）的正则表
阅读全文
摘要：在脚本或者程序运行时间较长时，为终端用户提供反馈信息，表示脚本或程序在辛勤工作，是非常重要的。本文将介绍常见的两种进度指示器（一系列原点和一条旋转线）以及一些其他提供进度指示的工具。 1. 使用一系列原点来指示进度 ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 1
阅读全文
摘要：输出特效格式控制： \033[0m 关闭所有属性 \033[1m 设置高亮度 \03[4m 下划线 \033[5m 闪烁 \033[7m 反显 \033[8m 消隐 \033[30m -- \033[37m 设置前景色 \033[40m -- \033[47m 设置背景色 光标位置等的格式控制： \
阅读全文
摘要：概述 awk就是把文件逐行的读入，以空格为默认分隔符将每行切片，切开的部分再进行各种分析处理 awk工作流程是这样的：读入有'\n'换行符分割的一条记录，然后将记录按指定的域分隔符划分域，填充域，$0则表示所有域,$1表示第一个域,$n表示第n个域。默认域分隔符是"空白键" 或 "[tab]键" a
阅读全文
摘要：sed是一个很好的文件处理工具，本身是一个管道命令，主要以行为单位进行处理，可以将数据行进行替换、删除、新增、选取等特定工作。 1. sed命令行格式 sed [选项] [命令] 1.1 选项 -n，使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到
阅读全文
摘要：1.文档编写目的 在CDH中使用Yarn的动态资源池，用户会根据时段来区分集群资源的分配情况（如：在夜晚时段集群资源主要倾向于跑批作业，白天时段集群资源主要倾向于业务部门实时计算作业）。针对这样的需求在CDH中如何配置？本篇文章Fayson主要介绍如何通过CM配置Yarn动态资源池的计划规则。 内容
阅读全文
摘要：https://www.cnblogs.com/huxiao-tee/p/4660352.html
阅读全文
摘要：概要 Spark流是对于Spark核心API的拓展，从而支持对于实时数据流的可拓展，高吞吐量和容错性流处理。数据可以由多个源取得，例如：Kafka，Flume，Twitter，ZeroMQ，Kinesis或者TCP接口，同时可以使用由如map，reduce，join和window这样的高层接口描述的
阅读全文
摘要：配置java，maven等环境变量 java: export JAVA_HOME=/usr/local/java export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tool.j
阅读全文
摘要：<!-- flowchart 箭头图标 勿删 --> 制作Elasticsearch的Parcel包和csd文件 将Parcel包和manifest.json文件部署到httpd服务中 [root@node01 ~]# mkdir -p /var/www/html/elasticsearch [ro
阅读全文
摘要：(转) 近两年，国内的大数据市场逐渐成熟，有真实的大数据处理需求的企业数量呈现爆炸性的增长，从传统的数据库产品往MPP数据库转型的增长势头十分迅猛。Greenplum作为MPP产品的领头羊，具有较低的学习成本，得到了国内大量客户的青睐。 目录 GP实施之道 1、前期规划的重要性 2、数据模型设计的重
阅读全文
摘要：mysql脚本内容如下: #!/bin/bash mysql -uroot -pmdap <<EOF use sbb; UPDATE param_config SET effect_param_value=ineffect_param_value WHERE ineffect_param_value
阅读全文
摘要：python中datetime模块非常好用，提供了日期格式和字符串格式相互转化的函数strftime/strptime 1、由日期格式转化为字符串格式的函数为: datetime.datetime.strftime() 2、由字符串格式转化为日期格式的函数为: datetime.datetime.s
阅读全文
