摘要: #!/bin/sh ### find pid jps=`jps -m` echo "$jps"|while read i do if[[ $i =~"agentTestTopic"]]; then #将字符串分割成数组 OLD_IFS="$IFS" IFS=" " arr=($i) IFS="$OL 阅读全文
posted @ 2017-09-20 11:35 四叶草Grass 阅读(957) 评论(0) 推荐(0) 编辑
摘要: 这篇文章主要给大家介绍了关于用Shell判断字符串包含关系的几种方法,其中包括利用grep查找、利用字符串运算符、利用通配符、利用case in 语句以及利用替换等方法,每个方法都给出了详细的示例代码与介绍,有需要的朋友们可以参考参考借鉴,下面来一起看看吧。 前言 现在每次分析网站日志的时候都需要判 阅读全文
posted @ 2017-09-19 22:32 四叶草Grass 阅读(268) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.linuxidc.com/Linux/2014-12/110463.htm 让echo输出带颜色的方法有两种 1.在shell脚本中定义颜色变量,使用echo -e调用变量 2.定义变量的时候,把echo -e定义到变量中,然后输出变量 可以让echo输出显示颜色的sh 阅读全文
posted @ 2017-09-19 22:22 四叶草Grass 阅读(564) 评论(0) 推荐(0) 编辑
摘要: lsof -i:端口号 lsof -i:端口号,用于查看某一端口的占用情况,比如查看22号端口使用情况,lsof -i:8080,如下图 [root@master bin]# lsof -i:8080 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAM 阅读全文
posted @ 2017-09-16 09:53 四叶草Grass 阅读(196) 评论(0) 推荐(0) 编辑
摘要: 新建一个test.sh文件 #!/bin/sh echo "1 : For Test" echo "2 : For nohup &" whiletrue do echo -n "please enter the number:" read line echo "$line" if[[ $line = 阅读全文
posted @ 2017-09-14 10:58 四叶草Grass 阅读(3859) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.jb51.net/article/56553.htm 前言: 无论什么编程语言都离不开条件判断。SHELL也不例外。 if list then do something here elif list then do another thing here else do 阅读全文
posted @ 2017-09-14 10:54 四叶草Grass 阅读(176) 评论(0) 推荐(0) 编辑
摘要: shell脚本报错:"[: =: unary operator expected" 在匹配字符串相等时,我用了类似这样的语句: if [ $STATUS == "OK" ]; then echo "OK" fi 在运行时出现了 [: =: unary operator expected 的错误,就一 阅读全文
posted @ 2017-09-14 10:47 四叶草Grass 阅读(351) 评论(0) 推荐(0) 编辑
摘要: 1、场景说明 [root@master ~]# jps -m 33050 Jps -m 3299 NameNode 3747 ResourceManager 9028 ConsoleConsumer --zookeeper 192.168.168.200:2181 --topic BusTicket 阅读全文
posted @ 2017-09-13 17:08 四叶草Grass 阅读(530) 评论(0) 推荐(0) 编辑
摘要: Linux 命令自动补齐快捷键 : TAB 阅读全文
posted @ 2017-09-12 15:52 四叶草Grass 阅读(7864) 评论(1) 推荐(1) 编辑
摘要: 一、下载编译flume-ng-sql-source 下载地址:https://github.com/keedio/flume-ng-sql-source.git ,安装说明文档编译和拷贝jar包 嫌麻烦的也可以直接,CSDN下载地址:http://download.csdn.net/detail/c 阅读全文
posted @ 2017-09-11 20:49 四叶草Grass 阅读(2186) 评论(0) 推荐(0) 编辑
摘要: 准备oracle驱动包:maven添加oracle jdbc依赖 pom.xml <!-- oracle jdbc驱动 --> <dependency> <groupId>com.oracle</groupId> <artifactId>ojdbc5</artifactId> <version>11 阅读全文
posted @ 2017-09-11 17:12 四叶草Grass 阅读(187) 评论(0) 推荐(0) 编辑
摘要: 一、spark-streaming-kafka-0-8_2.11-2.0.2.jar 1、pom.xml <!-- https://mvnrepository.com/artifact/org.apache.spark/spark-core_2.11 --> <dependency> <groupI 阅读全文
posted @ 2017-09-11 15:38 四叶草Grass 阅读(2569) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/qq_26479655/article/details/52555283 首先导入包 将kafka目录下的libs中的jar包导入 用maven建立 <dependency> <groupId>org.apache.kafka</groupId> < 阅读全文
posted @ 2017-09-11 12:06 四叶草Grass 阅读(1121) 评论(0) 推荐(0) 编辑
摘要: 1、RHEL 6.5系统安装配置图解教程(rhel-server-6.5) 2、在Linux下安装JDK图文解析 3、RedHat6.5上安装Hadoop单机 4、RedHat6.5安装Spark单机 5、RedHat6.5安装zookeeper单机 6、RedHat6.5安装kafka单机 7、R 阅读全文
posted @ 2017-09-09 21:24 四叶草Grass 阅读(166) 评论(0) 推荐(0) 编辑
摘要: Kafka学习8_kafka java 生产消费程序demo示例 kafka是吞吐量巨大的一个消息系统,它是用scala写的,和普通的消息的生产消费还有所不同,写了个demo程序供大家参考。kafka的安装请参考官方文档。 首先我们需要新建一个maven项目,然后在pom中引用kafka jar包, 阅读全文
posted @ 2017-09-05 22:29 四叶草Grass 阅读(1334) 评论(1) 推荐(0) 编辑
摘要: 数据存储的最大时间超过这个时间会根据log.cleanup.policy设置的策略处理数据,也就是消费端能够多久去消费数据log.retention.bytes和log.retention.hours任意一个达到要求,都会执行删除,会被topic创建时的指定参数覆盖。 在server.propert 阅读全文
posted @ 2017-09-01 15:39 四叶草Grass 阅读(8848) 评论(0) 推荐(1) 编辑
摘要: 转载自:http://www.cnblogs.com/Leo_wl/p/4564699.html 1.概述 前面给大家介绍了Kafka的背景以及一些应用场景,并附带上演示了Kafka的简单示例。然后,在开发的过程当中,我们会发现一些问题,那就是消息的监控情况。虽然,在启动Kafka的相关服务后,我们 阅读全文
posted @ 2017-08-30 20:34 四叶草Grass 阅读(355) 评论(1) 推荐(0) 编辑
摘要: Kafka Web Console:是一款开源的系统,源码的地址在https://github.com/claudemamo/kafka-web-console中。Kafka Web Console也是用Scala语言编写的Java web程序用于监控Apache Kafka。这个系统的功能和Kaf 阅读全文
posted @ 2017-08-30 18:23 四叶草Grass 阅读(1081) 评论(1) 推荐(0) 编辑
摘要: 在之前的博客中,介绍了Kafka Web Console这个监控工具,在生产环境中使用,运行一段时间后,发现该工具会和Kafka生产者、消费者、ZooKeeper建立大量连接,从而导致网络阻塞。并且这个Bug也在其他使用者中出现过,看来使用开源工具要慎重!该Bug暂未得到修复,不得已,只能研究下其他 阅读全文
posted @ 2017-08-30 16:27 四叶草Grass 阅读(260) 评论(1) 推荐(0) 编辑
摘要: 本文转载至:http://blog.csdn.net/zdwzzu2006/article/details/6928803 IP: ifconfig gateway: [root@localhost ~]# netstat -rn Kernel IP routing table Destinatio 阅读全文
posted @ 2017-08-28 22:52 四叶草Grass 阅读(600) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://blog.csdn.net/ch717828/article/details/50818261 1. 开启Kafka Consumer 首先选择集群的一台机器,打开kafka consumer,接收发送给kafka的消息。我选择的是 10.101.214.71这台机器。 通过以 阅读全文
posted @ 2017-08-28 11:20 四叶草Grass 阅读(799) 评论(0) 推荐(0) 编辑
摘要: 转载一篇,最原始的出处已不可考,望见谅! 常规篇: 首先,用ps查看进程,方法如下: ps -ef …… smx 1822 1 0 11:38 ? 00:00:49 gnome-terminal smx 1823 1822 0 11:38 ? 00:00:00 gnome-pty-helper sm 阅读全文
posted @ 2017-08-27 22:25 四叶草Grass 阅读(238) 评论(0) 推荐(0) 编辑
摘要: 一、查看磁盘空间 1、使用“df -k”命令,以KB为单位显示磁盘使用量和占用率。 [root@master ~]# df -k Filesystem 1K-blocks Used Available Use% Mounted on /dev/mapper/vg_hadoop-lv_root 572 阅读全文
posted @ 2017-08-27 20:35 四叶草Grass 阅读(345) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://www.cnblogs.com/EasonJim/p/6525242.html chmod修改第一列内容,chown修改第3、4列内容: chown用法: 用来更改某个目录或文件的用户名和用户组。 chown 用户名:组名 文件路径(可以是绝对路径也可以是相对路径) 例1: c 阅读全文
posted @ 2017-08-27 17:16 四叶草Grass 阅读(265) 评论(0) 推荐(0) 编辑
摘要: java.io.IOException:Failed to replace a bad datanode on the existing pipeline due to no more good datanodes being available to try.(Nodes: current=[Da 阅读全文
posted @ 2017-08-27 16:31 四叶草Grass 阅读(2045) 评论(0) 推荐(0) 编辑
摘要: 转自:nohup和&的区别 http://bbs.nanjimao.com/thread-470-1-1.html (出处: 南极猫) nohup是永久执行&是指在后台运行 运行 nohup --help Run COMMAND, ignoring hangup signals. 可以看到是“运行命 阅读全文
posted @ 2017-08-27 16:24 四叶草Grass 阅读(396) 评论(0) 推荐(0) 编辑
摘要: 一、依赖包maven路径 <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-client --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId 阅读全文
posted @ 2017-08-26 17:47 四叶草Grass 阅读(1653) 评论(0) 推荐(1) 编辑
摘要: 命令格式:jps [options ] [ hostid ] [options]选项 : -q:仅输出VM标识符,不包括classname,jar name,arguments in main method -m:输出main method的参数 -l:输出完全的包名,应用主类名,jar的完全路径名 阅读全文
posted @ 2017-08-26 16:58 四叶草Grass 阅读(497) 评论(0) 推荐(0) 编辑
摘要: 转载自:http://eksliang.iteye.com/blog/2105862 Java通过SSH2协议执行远程Shell脚本(ganymed-ssh2-build210.jar) 使用步骤如下: 一、导ganymed-ssh2-build210.jar包 <!-- https://mvnre 阅读全文
posted @ 2017-08-26 16:32 四叶草Grass 阅读(3565) 评论(0) 推荐(0) 编辑
摘要: [ERROR] 位置: 类 com.spark.test.JavaDirectKafkaWordCount [ERROR] /I:/TrueTimeControlOnSparkByJava/src/main/java/com/spark/test/JavaDirectKafkaWordCount.j 阅读全文
posted @ 2017-08-10 16:54 四叶草Grass 阅读(8045) 评论(1) 推荐(0) 编辑
摘要: [ERROR] Failed to execute goal org.apache.maven.plugins:maven-assembly-plugin:2.2-beta-5:assembly (make-assembly) on project test: Failed to create as 阅读全文
posted @ 2017-08-10 16:35 四叶草Grass 阅读(6301) 评论(0) 推荐(1) 编辑
摘要: Source code: Spark 源码,需要编译才能使用,另外 Scala 2.11 需要使用源码编译才可使用 Pre-build with user-provided Hadoop: "Hadoop free" 版,可应用到任意 Hadoop 版本 Pre-build for Hadoop 2 阅读全文
posted @ 2017-08-08 23:42 四叶草Grass 阅读(691) 评论(0) 推荐(0) 编辑
摘要: C:\Windows\System32\drivers\etc C:\Windows\System32\drivers\etc 阅读全文
posted @ 2017-08-08 23:29 四叶草Grass 阅读(893) 评论(0) 推荐(0) 编辑
摘要: 一、环境准备 安装oracle后,创建测试表、数据: create table test ( username varchar2(32) primary key , password varchar2(32) ); insert into test values('John','1234'); in 阅读全文
posted @ 2017-08-08 23:13 四叶草Grass 阅读(1356) 评论(0) 推荐(0) 编辑
摘要: 准备运行环境: 1)Portable Basemap Server(PBS)用于创建地图服务 官网网址:http://geopbs.codeplex.com/ 如何创建底图服务?操作步骤如下: 如果启动的时候端口冲突的话,打开PortableBasemapServer.exe.config配置端口号 阅读全文
posted @ 2017-08-08 15:31 四叶草Grass 阅读(1258) 评论(0) 推荐(0) 编辑
摘要: 转载自: http://blog.csdn.net/houpengfei111/article/details/9245337 http://blog.csdn.net/uniqed/article/details/51991327 1、WHERE子句中的连接顺序 ORACLE采用自下而上的顺序解析 阅读全文
posted @ 2017-08-08 15:08 四叶草Grass 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 1、 如何声明引用? <!DOCTYPE html> <html> <head> <meta charset="utf-8" /> <title>kindeditor在线编辑器的使用心得</title> <!-- 添加kindeditor的引用 --> <script type="text/java 阅读全文
posted @ 2017-08-08 14:18 四叶草Grass 阅读(713) 评论(0) 推荐(0) 编辑
摘要: 1.解压后添加My97DatePicker文件夹 2.引入WdatePicker.js文件 日期控件My97DatePicker的使用.html <!DOCTYPE html> <html> <head> <meta charset="utf-8" /> <title>日期控件My97DatePic 阅读全文
posted @ 2017-08-08 14:15 四叶草Grass 阅读(369) 评论(0) 推荐(0) 编辑
摘要: 1、使用jquery.media.js预览PDF <!DOCTYPE html> <html> <head> <meta charset="utf-8" /> <title>01使用jquery.media插件进行PDF预览</title> <script type="text/javascript 阅读全文
posted @ 2017-08-07 21:51 四叶草Grass 阅读(1544) 评论(0) 推荐(0) 编辑
摘要: 引用自:http://blog.csdn.net/qqhjqs/article/details/41683099?utm_source=tuicool&utm_medium=referral 的博客 关于SpringMVC的介绍我就不多说了,网上一搜一大堆,好多大鸟的博客都有详细的描述,之前看的跟开 阅读全文
posted @ 2017-08-07 20:54 四叶草Grass 阅读(514) 评论(0) 推荐(0) 编辑