摘要: postgreSQL数据库limit分页、排序 语法: select * from persons limit A offset B; 解释: A就是你需要多少行; B就是查询的起点位置。 示例: select * from persons limit 5 offset 0 ; 意思是,起点0开始查 阅读全文
posted @ 2018-01-08 22:30 四叶草Grass 阅读(606) 评论(0) 推荐(0) 编辑
摘要: Oracle 使用sys_guid()用来产生UUID值。 在PostgreSQL中有类似的函数,需要安装uuid-ossp插件。 如果用户不想修改代码,还是需要使用sys_guid()函数的话,可以自己写一个。 如下: postgres=# create extension "uuid-ossp" 阅读全文
posted @ 2018-01-08 22:27 四叶草Grass 阅读(2572) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/southflow/article/details/5944107 1. 下载postgresql-8.4-702.jdbc4.jar 2. 点击 project->properties 在弹出的对话框里点 Libraries 在右边点击 Add E 阅读全文
posted @ 2018-01-08 22:23 四叶草Grass 阅读(2186) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/cicon/article/details/51577655 获取表名及注释: select relname as tabname,cast(obj_description(relfilenode,'pg_class') as varchar) as 阅读全文
posted @ 2018-01-08 22:19 四叶草Grass 阅读(8835) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/ll136078/article/details/12747403 安 装PostgreSQL数据库之后,默认是只接受本地访问连接。如果想在其他主机上访问PostgreSQL数据库服务器,就需要进行相应的配置。 配置远 程连接PostgreSQL数据 阅读全文
posted @ 2018-01-08 22:16 四叶草Grass 阅读(221) 评论(0) 推荐(0) 编辑
摘要: 下载地址:http://www.postgres.cn/download 下载地址:http://www.filehorse.com/download-postgresql-64/ 下载地址2:https://pan.baidu.com/s/1i460dKx 下载时要注意查看PostgreSQL版本 阅读全文
posted @ 2018-01-08 22:12 四叶草Grass 阅读(482) 评论(0) 推荐(0) 编辑
摘要: 官网访问地址:http://www.zentao.net/ 可以点击演示试用相关功能: 禅道需要安装使用,支持Windows和Linux系统! 你可以在官网直接下载安装包: 官方的安装文档还是写的非常详细的,直接照着官方的安装文档步骤做就可以了: 友情提醒:官方是的默认后台数据库是MySQL,我们只 阅读全文
posted @ 2018-01-08 20:48 四叶草Grass 阅读(223) 评论(0) 推荐(0) 编辑
摘要: 官网访问地址:https://www.tracup.com/ 优势地方: ①免费使用 现在免费,今后也一直免费。 ②无需部署 网站采用云端部署,这也就意味着无需开发者自己搭建、部署,注册一个蒲公英账号即可,所有操作均在Web端完成。 ③简单清晰 官网访问地址:https://www.tracup.c 阅读全文
posted @ 2018-01-08 20:25 四叶草Grass 阅读(224) 评论(0) 推荐(0) 编辑
摘要: 转载自:https://www.jianshu.com/p/e7d3121eaaec 在这个移动互联网的时代,每天都会涌入大量新的 App,想要留住你的用户,必须时刻保持产品创新与系统的稳定。对于开发者来说,必须要在最短的时间完成开发工作并且兼容主流机型,这无疑会带来非常多的工作量,而下图的数据结果 阅读全文
posted @ 2018-01-08 20:10 四叶草Grass 阅读(1327) 评论(0) 推荐(0) 编辑
摘要: 截至目前最新的HDP版本为2.6: https://zh.hortonworks.com/products/data-platforms/hdp/ 如果版本更新,可采用以下步骤: 首先访问hortonworks官方网址:https://zh.hortonworks.com/products/ 截至目 阅读全文
posted @ 2018-01-07 19:41 四叶草Grass 阅读(5507) 评论(1) 推荐(2) 编辑
摘要: 截至目前最新的Ambari版本为2.6: https://docs.hortonworks.com/HDPDocuments/HDP2/HDP-2.6.3/bk_support-matrices/content/ch_matrices-ambari.html#ambari_stack 如果版本更新, 阅读全文
posted @ 2018-01-07 18:38 四叶草Grass 阅读(4230) 评论(1) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/levy_cui/article/details/52461377 官方升级版本说明 http://docs.hortonworks.com/HDPDocuments/Ambari-2.4.0.1/bk_ambari-installation/con 阅读全文
posted @ 2018-01-07 18:03 四叶草Grass 阅读(1573) 评论(0) 推荐(0) 编辑
摘要: 参考自: http://blog.csdn.net/xingxc111/article/details/70667574 http://blog.csdn.net/xfg0218/article/details/78067541 https://stackoverflow.com/questions 阅读全文
posted @ 2018-01-07 17:58 四叶草Grass 阅读(9173) 评论(0) 推荐(1) 编辑
摘要: [root@master ~]# mkdir -p /var/www/html 使用安装系统的ISO镜像文件CentOS-7-x86_64-Everything-1611.iso 把CentOS-7-x86_64-Everything-1611.iso镜像复制到http服务器(选择master机器) 阅读全文
posted @ 2018-01-07 01:02 四叶草Grass 阅读(464) 评论(0) 推荐(0) 编辑
摘要: [root@master ~]# mkdir -p /var/www/html 使用安装系统的ISO镜像文件rhel-server-7.3-x86_64-dvd.iso 把rhel-server-7.3-x86_64-dvd.iso镜像复制到http服务器(选择master机器)的默认目录/var/ 阅读全文
posted @ 2018-01-07 00:57 四叶草Grass 阅读(866) 评论(0) 推荐(0) 编辑
摘要: 1.下载Mysql安装包 https://cdn.mysql.com//Downloads/MySQL-5.7/mysql-5.7.20-1.el6.x86_64.rpm-bundle.tar 附百度云盘下载链接:链接:https://pan.baidu.com/s/1hsndQJi 密码:cjez 阅读全文
posted @ 2018-01-07 00:28 四叶草Grass 阅读(885) 评论(0) 推荐(0) 编辑
摘要: Ambari 借鉴了很多成熟分布式软件的 API 设计。Rest API 就是一个很好地体现。通过 Ambari 的 Rest API,可以在脚本中通过 curl 维护整个集群。并且,我们可以用 Rest API 实现一些无法在 Ambari GUI 上面做的操作。 目前 Ambari 不支持在 G 阅读全文
posted @ 2018-01-06 23:43 四叶草Grass 阅读(464) 评论(0) 推荐(0) 编辑
摘要: 1 Ambari介绍、安装与应用案例介绍 1.1 Ambari Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目。目前最新的发布版本是 2.6.0。就 Ambari 的作用来说,就是创建、管理、监视 Hadoop 阅读全文
posted @ 2018-01-06 22:41 四叶草Grass 阅读(310) 评论(0) 推荐(0) 编辑
摘要: 1 Ambari介绍、安装与应用案例介绍 1.1 Ambari Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目。目前最新的发布版本是 2.6.0。就 Ambari 的作用来说,就是创建、管理、监视 Hadoop 阅读全文
posted @ 2018-01-01 21:32 四叶草Grass 阅读(296) 评论(0) 推荐(0) 编辑
摘要: 相信各位It的从业人员都遇到过安装了虚拟机搭建测试环境,可是在使用windows服务器版本操作系统的时候。出现要求发送ctrl+alt+delete组合键,才能登陆操作系统。为此咗嚛提供3个方法给您解决 方法/步骤 真实机发送ctrl+alt+delete组合键之后,会自动地打开真实机的任务调用系统 阅读全文
posted @ 2017-10-30 16:58 四叶草Grass 阅读(2548) 评论(0) 推荐(0) 编辑
摘要: 拷贝Linux操作系统的rhel-server-6.5-x86_64-dvd.iso镜像到装好的Linux中: #执行挂载命令 mount –o loop /media/rhel-server-6.5-x86_64-dvd.iso /mnt/iso 输入df -h命令进行测试: 挂载成功之后: 拷贝 阅读全文
posted @ 2017-10-30 12:07 四叶草Grass 阅读(382) 评论(0) 推荐(0) 编辑
摘要: 提示错误如下: Kernel Headers for version 3.10.0-229.14.1.el7.x86_64 were not found.If you.... 安装kernel devel yum install kernel-devel-3.10.0-229.14.1.el7.x8 阅读全文
posted @ 2017-10-26 15:59 四叶草Grass 阅读(382) 评论(0) 推荐(0) 编辑
摘要: 一、Spark基本术语表 转载自:http://blog.csdn.net/simple_the_best/article/details/70843756 以下内容来自 http://spark.apache.org/docs/2.1.0/cluster-overview.html#glossar 阅读全文
posted @ 2017-10-25 17:21 四叶草Grass 阅读(282) 评论(0) 推荐(0) 编辑
摘要: 百度搜索Spark: 这一个是Spark的官网网址,你可以在上面下载相关的安装包等等。 这一个是最新的Spark的文档说明,你可以查看如何安装,如何编程,以及含有对应的学习资料。 百度搜索Spark: 这一个是Spark的官网网址,你可以在上面下载相关的安装包等等。 这一个是最新的Spark的文档说 阅读全文
posted @ 2017-10-25 11:28 四叶草Grass 阅读(697) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.daniubiji.cn/archives/596 HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文 阅读全文
posted @ 2017-10-21 21:28 四叶草Grass 阅读(125) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.daniubiji.cn/archives/538 什么叫大数据 “大”,说的并不仅是数据的“多”!不能用数据到了多少TB ,多少PB 来说。 对于大数据,可以用四个词来表示:大量,多样,实时,价值。 大量:这个大家都知道,想百度,淘宝,腾讯,Facebook,Twit 阅读全文
posted @ 2017-10-21 17:30 四叶草Grass 阅读(862) 评论(0) 推荐(0) 编辑
摘要: ifconfig -a|grep inet|grep -v 127.0.0.1|grep -v inet6|awk '{print $2}'|tr -d "addr:"​ 命令解释如下: grep 'inet' 截取包含ip的行 grep -v '127.0.0.1' 去掉本地指向的那行 grep  阅读全文
posted @ 2017-10-20 14:57 四叶草Grass 阅读(6484) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/xiaoshunzi111/article/details/52173994 功能说明:分割文件。 Split:按指定的行数截断文件 格式: split [-n] file [name] 参数说明: -n: 指定截断的每一文件的长度,不指定缺省为10 阅读全文
posted @ 2017-10-19 16:01 四叶草Grass 阅读(806) 评论(0) 推荐(0) 编辑
摘要: 转载自:https://zhidao.baidu.com/question/627912810044012524.html 获得当天的日期 [root@master ~]# date +%Y-%m-%d 2017-10-19 有时候我们需要使用今天之前或者往后的日期,这时可以使用date的 -d参数 阅读全文
posted @ 2017-10-19 15:58 四叶草Grass 阅读(2368) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/shawnhu007/article/details/50971084 最近在一hadoop测试集群运行一个spark streaming程序,然后使用nohup ./execute.sh & 执行让程序后台运行,才几天日志就上G了,如果有问题想要查 阅读全文
posted @ 2017-10-19 15:45 四叶草Grass 阅读(5263) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/qinglu000/article/details/18963031 先说一下linux重定向: 0、1和2分别表示标准输入、标准输出和标准错误信息输出,可以用来指定需要重定向的标准输入或输出。 在一般使用时,默认的是标准输出,既1.当我们需要特殊用 阅读全文
posted @ 2017-10-11 14:04 四叶草Grass 阅读(227) 评论(0) 推荐(0) 编辑
摘要: 参考自:http://newmiracle.cn/?p=661 Linux shell根据端口返回进程号杀死进程的方法 kill -9 `lsof -t -i:8888` 这个就是杀死8888端口的进程号 参考自:http://www.linuxfly.org/post/182.htm lsof命令 阅读全文
posted @ 2017-09-26 12:13 四叶草Grass 阅读(1676) 评论(0) 推荐(0) 编辑
摘要: 运行 ./sbin/start-master.sh : SparkCommand:/usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java -cp /home/server/spark/conf/:/home/server/spark/jars/*:/home/s 阅读全文
posted @ 2017-09-24 22:27 四叶草Grass 阅读(379) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.jianshu.com/p/082ef79c63c1 broadcast 官方文档描述: Broadcast a read-only variable to the cluster, returning a [[org.apache.spark.broadcast.Br 阅读全文
posted @ 2017-09-24 22:17 四叶草Grass 阅读(391) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景 在我们大量使用分布式数据库、分布式计算集群的时候,是否会遇到这样的一些问题: 我们想分析下用户行为(pageviews),以便我们设计出更好的广告位 阅读全文
posted @ 2017-09-24 21:12 四叶草Grass 阅读(143) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.cnblogs.com/weixiuli/p/6413109.html 一、相关参数配置 1、System ############################ System ############################# #唯一标识在集群中的ID,要求 阅读全文
posted @ 2017-09-24 21:03 四叶草Grass 阅读(188) 评论(0) 推荐(0) 编辑
摘要: Spark集群master节点: 192.168.168.200 Eclipse运行windows主机: 192.168.168.100 场景: 为了测试在Eclipse上开发的代码在Spark集群上运行的情况,比如:内存、cores、stdout以及相应的变量传递是否正常! 生产环境是把在Ecli 阅读全文
posted @ 2017-09-22 22:42 四叶草Grass 阅读(462) 评论(0) 推荐(0) 编辑
摘要: 我们在编写Spark Application或者是阅读源码的时候,我们很想知道代码的运行情况,比如参数设置的是否正确等等。用Logging方式来调试是一个可以选择的方式,但是,logging方式调试代码有很多的局限和不便。今天我就来介绍如何通过IDE来远程调试Spark的Application或者是 阅读全文
posted @ 2017-09-22 21:46 四叶草Grass 阅读(952) 评论(0) 推荐(0) 编辑
摘要: WinSCP WinSCP是一个Windows环境下使用SSH的开源图形化SFTP客户端。同时支持SCP协议。它的主要功能就是在本地与远程计算机间安全的复制文件。 为了复制到Linux的文件具有777权限,不必每次启动服务或者写日志文件报权限不足,需要修改一些配置: 1、点击【选项】 >【选项】 2 阅读全文
posted @ 2017-09-20 11:53 四叶草Grass 阅读(4442) 评论(1) 推荐(1) 编辑
摘要: 原文链接:http://1985wanggang.blog.163.com/blog/static/776383320121745626320/ a="one,two,three,four" 要将$a分割开,可以这样: OLD_IFS="$IFS" IFS="," arr=($a) IFS="$OL 阅读全文
posted @ 2017-09-20 11:37 四叶草Grass 阅读(557) 评论(0) 推荐(0) 编辑