2019年9月19日
摘要：
重新收集统计信息 1.分析和存储表的关键字分布 analyze table table_name; analyze 用于收集优化器的统计信息、和tuning相关；对 myisam、BOB、innodb起作用 注意：（经过实践操作 在MySQL5.5版本下执行sql：analyze table tab 阅读全文
2019年9月19日
2019年9月18日
摘要：
本篇文章主要介绍了”shell 判断字符串是否为数字”，主要涉及到shell 判断字符串是否为数字方面的内容，对于shell 判断字符串是否为数字感兴趣的同学可以参考一下。 阅读全文
摘要：
同时匹配ABC 和 abc:sed -n '/ABC/{/abc/p}' awk '/ABC/&&/abc/{ print $0 }' grep -E '(ABC.*abc|abc.*ABC)' 匹配ABC 或 abc:sed -n '/\(ABC\|abc\)/p'awk '/ABC/||/abc 阅读全文
2019年9月17日
摘要：
转载自https://blog.csdn.net/jiedao_liyk/article/details/78470498 linux登录后有时候会出现-bash-4.1$ 造成这样的原因： 与这个用户有关环境变量没了，有关的文件被删除。也就是用户的家目录下面 .bash_profile .bash 阅读全文
2019年9月11日
摘要：
一、推荐使用下面下载地址 https://network.pivotal.io/products/pivotal-gpdb#/releases/158026/file_groups/1083 二、官网下载 阅读全文
2019年9月10日
摘要：
neo4j开启与关闭 进入neo4j目录bin下。 cd到bin目录下，执行启动命令： ./neo4j start 另外neo4j还有其他命令，执行方式相同： neo4j { console | start | stop | restart | status } 如果，./neo4j stop 如果 阅读全文
摘要：
针对数据库不同的使用场景TPC组织发布了多项测试标准。其中被业界广泛接受和使用的有TPC-C 、TPC-H和TPC-DS。 TPC-C: Approved in July of 1992, TPC Benchmark C is an on-line transaction processing (O 阅读全文
2019年9月9日
摘要：
Docker+GitLab+Jenkins+kubernetes实现DevOps 持续化集成和持续化部署概念图 转载自：原创 IT综合 作者：百联达 时间：2017-05-09 15:48:08 4189 0 http://blog.itpub.net/28624388/viewspace-2138 阅读全文
摘要：
mongodb Presto 阅读全文
摘要：
背景 kafka早期作为一个日志消息系统，很受运维欢迎的，配合ELK玩起来很happy，在kafka慢慢的转向流式平台的过程中，开发也慢慢介入了，一些业务系统也开始和kafka对接起来了，也还是很受大家欢迎的，由于业务需要，一部分小白也就免不了接触kafka了，这些小白总是会安奈不住好奇心，要精确的 阅读全文
2019年9月6日
摘要：
ps -p 986 -o etime可以获取进程986的执行时间，不论系统时间有没有发生改变，它都可以返回正确的结果: 以上显示986进程运行了13天25分钟12秒。 可见它累积的是真正的程序运行时间，而不是系统运行时间与进程启动之间之差（这种方式在时间同步等其他会引起系统时间变化的情况下并不准确） 阅读全文
摘要：
本文链接：https://blog.csdn.net/wyqwilliam/article/details/825600431、求和cat data|awk '{sum+=$1} END {print "Sum = ", sum}'2、求平均cat data|awk '{sum+=$1} END { 阅读全文
摘要：
本文链接：https://blog.csdn.net/pg_hgdb/article/details/79202912如果客户端认证方式为密码验证，那么必然会涉及到修改密码 如何安全地修改密码： 方式1 使用psql，连接到Postgres Server： test1=> \password Ent 阅读全文
2019年9月5日
摘要：
可以使用prefix参数。 rpm -i –prefix=/home/gpadmin greenplum-db-6.0.0-rhel6-x86_64.rpm 将greenplum-db-6.0.0-rhel6-x86_64.rpm包安装到/home/gpadmin目录下。 阅读全文
2019年9月4日
摘要：
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。 本文链接：https://blog.csdn.net/a_drjiaoda/article/details/88290620 《一份详细的Kylin执行样例——基于kylin2.5.0》一文中， 阅读全文
摘要：
本文出处：http://www.cnblogs.com/wy123/p/7366486.html （保留出处并非什么原创作品权利，本人拙作还远远达不到，仅仅是为了链接到原文，因为后续对可能存在的一些错误进行修正或补充，无他） mysql执行计划中的extra列中表明了执行计划的每一步中的实现细节，其 阅读全文
摘要：
现如今，大数据、数据科学和机器学习不仅是技术圈的热门话题，也是当今社会的重要组成。数据就在每个人身边，同时每天正以惊人的速度快速增长，据福布斯报道：到 2025 年，每年将产生大约 175 个 Zettabytes 的数据量。 目前我们所熟知的行业都越来越依赖于对大数据的高级处理和分析，如金融、医疗 阅读全文
摘要：
全球各种大数据技术涌现的今天，为了充分利用大量数据获得竞争优势，企业需要高性能的数据分析平台，可靠并及时地提供对海量数据的分析见解。对于数据驱动型企业，在海量数据上交互式分析的能力是非常重要的能力之一。本测试侧重在多维分析场景，对比Spark SQL 与 Kyligence 产品在大规模数据集上的查 阅读全文
2019年8月28日
摘要：
数据库执行drop table XXX后，查看du -sh 已下降，但df -h /pgdb没有减少，是有还有进程使用对应的文件句柄 1.通过表名确认文件ID 2.确认使用文件ID的进程是否可以删除 3.删除对应进程 4.数据库drop 对应的表 1 drop table table_name; 1 阅读全文
摘要：
select s.oid,s.relname,t.stausename,t.stasubtype from pg_class s,pg_stat_last_operation t where s.relname='XXXX' and t.objid=s.oid; 阅读全文
摘要：
kill方式是杀掉进程，但是有时候需要取消相关SQL语句，采用以下方式 一、查看哪些SQL语句正在执行 语句如下：SELECT datname,procpid,query_start, current_query,waiting,client_addr FROM pg_stat_activity W 阅读全文
摘要：
1.CPU占用最多的前10个进程： ps auxw|head -1;ps auxw|sort -rn -k3|head -10 2.内存消耗最多的前10个进程 ps auxw|head -1;ps auxw|sort -rn -k4|head -10 3.虚拟内存使用最多的前10个进程 ps aux 阅读全文
2019年8月27日
摘要：
在工作中有这样的情况，需要显示所有的文件，按照时间先后或者文件大小先后排序显示 命令：ls 1.按时间排序显示文件 1 test@> ll -rt 1 test@> ll -rt 1 test@> ll -rt 1 test@> ll -rt test@> ll -rt 2.按文件大小排序显示文件( 阅读全文
摘要：
CSDN免费下载地址 tpc-h-v2.17.3.zip tools https://download.csdn.net/download/zes2014/10558251 阅读全文
摘要：
当在使用greenplum过程中有不当的操作时，可能会出现segment节点宕掉的情况（比如在greenplum运行的过程中停掉其中几台segment节点的服务器），通过下面的方法可以恢复segment。 下面是现场出现的故障情况： 可以看到有6个节点Failed，有2个节点的Primary和Mir 阅读全文
摘要：
Linux下ps -ef和ps aux的区别及格式详解 Linux下显示系统进程的命令ps，最常用的有ps -ef 和ps aux。这两个到底有什么区别呢？两者没太大差别，讨论这个问题，要追溯到Unix系统中的两种风格，System Ｖ风格和BSD 风格，ps aux最初用到Unix Style中， 阅读全文
摘要：
版权声明：本文为博主原创文章，遵循 CC 4.0 by-sa 版权协议，转载请附上原文出处链接和本声明。 本文链接：https://blog.csdn.net/u013047584/article/details/80869130 接触ElasticSearch一段时间了，前期调研、项目接入、数据同 阅读全文
摘要：
阅读全文
2019年8月26日
摘要：
https://github.com/digoal/pg_tpch 明天以此为准 https://www.jianshu.com/p/83e670cf3ffb https://yq.aliyun.com/articles/606980 https://yq.aliyun.com/articles/9 阅读全文
摘要：
TPC-H是事务处理性能委员会（ Transaction ProcessingPerformance Council ）制定的基准程序之一，TPC- H 主要目的是评价特定查询的决策支持能力，该基准模拟了决策支持系统中的数据库操作，测试数据库系统复杂查询的响应时间，以每小时执行的查询数(TPC-H 阅读全文
摘要：
使用TPC-H进行性能测试，需要有很多工作配合才能获得较高性能，如建立索引，表数据的合理分布（使用表空间和聚簇技术）等。本文从查询优化技术的角度，对TPC-H的22条查询语句和主流数据库执行每条语句对应的查询执行计划进行分析，目的在于了解各个主流数据库的查询优化技术，以TPC-H实例进一步掌握查询优 阅读全文
摘要：
pg_hba.conf 配置详解 该文件位于初始化安装的数据库目录下 编辑 pg_hba.conf 配置文件 postgres@clw-db1:/pgdata/9.6/poc/data> vi pg_hba.conf1 TYPE 参数设置 TYPE 表示主机类型，值可能为：若为 `local` 表示 阅读全文
摘要：
ipcs 1. 命令格式 ipcs [resource-option] [output-format] ipcs [resource-option] -i id 2. 命令功能 提供IPC设备的信息 3. 使用方法 resource选项： ipcs -m 查看系统共享内存信息 ipcs -q 查看系 阅读全文
摘要：
egrep 可以看着是grep的扩展，参数-e支持正则匹配 满足其中任一条件 egrep -e "tiaojian1|tiaojian2" test.txt 阅读全文
2019年8月22日
摘要：
一、ACID介绍 ACID就是常见数据库事务的四大特性：Atomicity(原子性)、Consistency（一致性）、Isolation（隔离性）、Durability（持久性）。 在Hive 0.13之前，Hive支持分区级别上原子性、一致性、持久性，隔离性可以通过hive提供的锁机制来实现（通 阅读全文
摘要：
https://blog.csdn.net/zzq900503/article/details/52982828 简介 我们在上篇文章中已经了解了CDH，为了后续的学习，我们本章就来安装CDH5.8。CDH5.8是目前比较新的版本，自带hadoop2.0以上的hadoop，而且已经包含了很多组件，也 阅读全文
摘要：
一、概述 Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop,简化了 阅读全文
摘要：
一、概述 Apache Ambari是一个基于Web的支持Apache Hadoop集群的供应、管理和监控的开源工具，Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。提供Web UI进行可 阅读全文
摘要：
一 前言 阅读本文前需要掌握的知识： Linux基本原理和命令 Hadoop生态系统（包括HDFS，Spark的原理和安装命令） 由于Hadoop生态系统组件众多，导致大数据平台多节点的部署，监控极其不方便，因此一些Hadoop厂商提供了企业发行版，例如CDH，HDP等。这些Hadoop企业发行版将 阅读全文