摘要: 一FlinkTime类型 有3类时间,分别是数据本身的产生时间、进入Flink系统的时间和被处理的时间,在Flink系统中的数据可以有三种时间属性: Event Time 是每条数据在其生产设备上发生的时间。这段时间通常嵌入在记录数据中,然后进入Flink,可以从记录中提取事件的时间戳;Event 阅读全文
posted @ 2019-08-29 15:54 oneqhw 阅读(1475) 评论(0) 推荐(0) 编辑
摘要: 计算引擎 大数据计算引擎分为离线计算和实时计算,离线计算就是我们通常说的批计算,代表是Hadoop MapReduce、Hive等大数据技术。实时计算也被称作流计算,代表是Storm、Spark Streaming、Flink等大数据技术。 计算引擎也在不断更新迭代,下图展示的是每一代计算引擎的代表 阅读全文
posted @ 2019-08-05 19:42 oneqhw 阅读(939) 评论(0) 推荐(0) 编辑
摘要: 1. 背景 在分布式集群系统的开发中,线程锁往往并不能支持全部场景的使用,必须引入新的技术方案分布式锁。 2. 原理 实现分布式锁必须依靠第三方存储介质来存储锁的元数据等信息。比如分布式集群要操作某一行数据时,这个数据的流水号是唯一的,那么就把这个流水号作为一把锁的id,当某进程要操作该数据时,先去 阅读全文
posted @ 2019-08-05 19:39 oneqhw 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 1.在项目名称,readme文件和描述中包含关键字seckill的项目seckill in:name,readme,description 2.fork大于500,stars大于500springboot forks:>500 stars:>500 3.forks在100到200之间,stars在8 阅读全文
posted @ 2019-06-27 09:36 oneqhw 阅读(1321) 评论(0) 推荐(0) 编辑
摘要: docker中nginx负载均衡 阅读全文
posted @ 2019-03-26 19:00 oneqhw 阅读(3952) 评论(0) 推荐(1) 编辑
摘要: 1.整体架构 本测试包括1个nginx,2个tomcat。整个系统架构如下。 Nginx下管理了静态资源,如jsp,css等。连接了2个tomcat,采用轮询访问的规则。 2.tomcat部署 本次测试中用了2个tomcat,其服务端口为8081、8082。在两个tomcat的webapps目录下部 阅读全文
posted @ 2019-03-24 10:39 oneqhw 阅读(28430) 评论(0) 推荐(0) 编辑
摘要: 1.Eden区 Eden区位于Java堆的年轻代,是新对象分配内存的地方,由于堆是所有线程共享的,因此在堆上分配内存需要加锁。而Sun JDK为提升效率,会为每个新建的线程在Eden上分配一块独立的空间由该线程独享,这块空间称为TLAB(Thread Local Allocation Buffer) 阅读全文
posted @ 2019-03-07 19:32 oneqhw 阅读(190) 评论(0) 推荐(0) 编辑
摘要: 消息中间件和消息通信与RPC各自具有怎样的优势,如何互补消息中间件主要实现的是异步、弹性消息以及队列,弹性消息有时可以借助于外存从而一定程度上可以实现峰值缓存,有效均衡服务器端压力,同时消息可以进行一定程度上的定于,从而实现了基于分组的广播,同时可以实现消息订阅;RPC则是主要集中于外部的方法调用, 阅读全文
posted @ 2019-03-07 19:28 oneqhw 阅读(2599) 评论(0) 推荐(1) 编辑
摘要: 在日常工作中,我们会有时会开慢查询去记录一些执行时间比较久的SQL语句,找出这些SQL语句并不意味着完事了,些时我们常常用到explain这个命令来查看一个这些SQL语句的执行计划,查看该SQL语句有没有使用上了索引,有没有做全表扫描,这都可以通过explain命令来查看。所以我们深入了解MySQL 阅读全文
posted @ 2019-03-07 19:26 oneqhw 阅读(139) 评论(0) 推荐(0) 编辑
摘要: 集合判断: 例1: 判断集合是否为空:CollectionUtils.isEmpty(null): trueCollectionUtils.isEmpty(new ArrayList()): trueCollectionUtils.isEmpty({a,b}): false 例2: 判断集合是否不为 阅读全文
posted @ 2019-03-07 19:24 oneqhw 阅读(3652) 评论(0) 推荐(0) 编辑
摘要: BST(二叉查找树,排序二叉树),如果数据有序的话,组成的二叉树会形成单列的形式,导致查询效率低AVL(平衡二叉树) 使树的左右高度差的绝对值不超过2,保证了查询效率。但是插入和删除会带来多次旋转,导致效率低RBT(红黑树),是一种弱化的平衡二叉树,在插入、删除的时候,减少了旋转的次数B-树,由于二 阅读全文
posted @ 2019-03-07 19:21 oneqhw 阅读(390) 评论(0) 推荐(0) 编辑
摘要: 概述 比如去火车站买票, 有7个(maximumPoolSize)售票窗口, 但只有3个(corePoolSize)窗口对外开放。那么对外开放的3个窗口称为核心线程数, 而最大线程数是7个窗口。 如果3个窗口都被占用, 那么后来的人就必须在售票厅(SynchronousQueue、LinkedBlo 阅读全文
posted @ 2019-03-07 17:56 oneqhw 阅读(900) 评论(0) 推荐(0) 编辑
摘要: tomcat源码导入 阅读全文
posted @ 2019-03-06 13:31 oneqhw 阅读(4148) 评论(0) 推荐(0) 编辑
摘要: 1. Eclipse中安装STS插件 (1)在线安装 Help--Eclipse Marketplace... 搜索“STS”,点击“install”安装 (2)本地安装 打开网页 http://spring.io/tools/sts/all 下载适合自己的eclipse版本的STS压缩包 下载后, 阅读全文
posted @ 2018-02-02 16:50 oneqhw 阅读(11320) 评论(0) 推荐(0) 编辑
摘要: 简介 Curator是Netflix公司开源的一套zookeeper客户端框架,解决了很多Zookeeper客户端非常底层的细节开发工作,包括连接重连、反复注册Watcher和NodeExistsException异常等等。Patrixck Hunt(Zookeeper)以一句“Guava is t 阅读全文
posted @ 2018-02-02 10:35 oneqhw 阅读(861) 评论(0) 推荐(0) 编辑
摘要: 尼玛,被mybatis的*Mapper.xml文件害惨了!整整两天都在围绕这个问题转圈! 先看问题长啥样吧!下面是通过逆向工程生成的Mapper.xml文件,包路径什么的都没有错! 贴出来详细的报错信息: 折腾了两天,偶尔在网上见网友如下解决方案,才算是解决了(想大哭一场): 在pom文件中添加如下 阅读全文
posted @ 2018-01-30 15:20 oneqhw 阅读(2611) 评论(0) 推荐(0) 编辑
摘要: 今年早些时候,当谷歌 DeepMind 团队的 AlphaGo 打败了李世石时,媒体就用人工智能、机器学习和深度学习这三个术语来描述 DeepMind 是如何取得胜利的。这三个名词都是 AlphaGo 大胜李世石的原因中的一部分,但是它们并不相同。下面我们就来解释一下。 理解三者之间关系的最简便方法 阅读全文
posted @ 2018-01-30 15:02 oneqhw 阅读(4252) 评论(0) 推荐(0) 编辑
摘要: jdk1.5不支持http协议,jdk1.8默认支持,比较好的解决方案是升级jdk,但是升级jdk风险极大。不能升级jdk的情况下,可以使用如下方式。 利用httpclient,进行封装,从而实现对https的get和post请求 阅读全文
posted @ 2018-01-29 19:05 oneqhw 阅读(4759) 评论(0) 推荐(0) 编辑
摘要: (说明:MongoFileOperationUtil是自己封装的一个Mongodb文件读写工具类,里面需要依赖AdvancedDatastore对象实例,dsForRW用来获取Mongodb数据源)在springframework里,我们不能@Autowired一个静态变量,使之成为一个spring 阅读全文
posted @ 2018-01-22 10:59 oneqhw 阅读(626) 评论(0) 推荐(0) 编辑
摘要: 概述 Thrift是一个软件框架,用来进行可扩展且跨语言的服务的开发。它结合了功能强大的软件堆栈和代码生成引擎,以构建在 C++、Java、Python、PHP、Ruby、Erlang、Perl、Haskell、C#、Cocoa、JavaScript、Node.js、Smalltalk、and OC 阅读全文
posted @ 2018-01-17 17:00 oneqhw 阅读(781) 评论(0) 推荐(0) 编辑
摘要: 1.下载activeMQ2.解压activeMQ3.启动 对于5.10版本以及之后用:bin\activemq start 对于5.9版本以及更早的用:bin\activemq4.消息类型 4.1点对点 消息生产者生产消息发送到queue中,然后消息消费者从queue中取出并且消费消息。消息被消费以 阅读全文
posted @ 2018-01-12 17:42 oneqhw 阅读(136) 评论(0) 推荐(0) 编辑
摘要: 先看一个例子: 我自定义的一个moudle,里面有一个方法sayhi,还有一个变量version#!/usr/bin/env python # coding=utf-8 # Filename: mymodule.pydef sayhi(): print ("Hi this is mymodule s 阅读全文
posted @ 2018-01-10 14:20 oneqhw 阅读(443) 评论(0) 推荐(0) 编辑
摘要: AI 学习,pip安装常用模块,以及TensorFlow测试 阅读全文
posted @ 2018-01-09 23:58 oneqhw 阅读(340) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2017-11-13 15:51 oneqhw 阅读(124) 评论(0) 推荐(0) 编辑
摘要: 上一篇介绍了通过context.getJobDetail().getJobDataMap()方式获取传递的数据,其实可以通过定义属性来传递参数 调度器中传输数据 阅读全文
posted @ 2017-07-16 22:35 oneqhw 阅读(1738) 评论(0) 推荐(0) 编辑
摘要: Quartz定时器使用比较广泛,介绍一点简单的使用 上代码:定义一个Job,执行具体的任务 Job的执行 好了就这样吧 阅读全文
posted @ 2017-07-13 23:47 oneqhw 阅读(1738) 评论(0) 推荐(0) 编辑
摘要: Redis作为服务器缓存,用处比较多。本文使用java操作redis,对操作进行简单的封装,并介绍如何将其集成到spring中,最后介绍redis分页查询。 首先定义操作接口,为redis的单机操作和集群操作提供标准。 定义单机版实现类 如下是集群操作实现类 jedis相关的bean在spring中 阅读全文
posted @ 2017-07-12 23:06 oneqhw 阅读(625) 评论(0) 推荐(0) 编辑
摘要: 在写jar程序,而不是web程序的时候,使用mybatis作为持久层,可以集成POOLED连接池,而阿里的druid不能用,确实很郁闷。不过有办法。 首先准备好数据库配置文件 然后对Druid进行一个简单的封装 封装好之后,可以在mybatis的配置文件中使用了 然后就可以使用了 阅读全文
posted @ 2017-07-11 23:34 oneqhw 阅读(4146) 评论(0) 推荐(0) 编辑
摘要: 一、启动方式1、使用linux命令service 启动:service mysqld start2、使用 mysqld 脚本启动:/etc/inint.d/mysqld start3、使用 safe_mysqld 启动:safe_mysqld& 二、停止1、使用 service 启动:service 阅读全文
posted @ 2017-07-11 22:33 oneqhw 阅读(79360) 评论(0) 推荐(4) 编辑
摘要: Hive2.x的工具类,对常用方法进行了封装,其中设置了kerberos认证。 阅读全文
posted @ 2017-07-11 01:28 oneqhw 阅读(1916) 评论(0) 推荐(0) 编辑
摘要: HDFS操作 阅读全文
posted @ 2017-07-11 01:19 oneqhw 阅读(2089) 评论(2) 推荐(0) 编辑
摘要: CentOS下java环境变量配置 阅读全文
posted @ 2017-07-10 14:33 oneqhw 阅读(2111) 评论(0) 推荐(0) 编辑
摘要: 前言 这段时间没有更新博客,一直想做一个基于ssm的简单的项目。经过多次的尝试,终于实现了简单的增删查改功能了。 正文 由于前端的技术不是很熟悉,经过多方的查阅,使用了bootstrap的样式,来使界面变的好看一些。 登陆页面如下: 输入用户名和密码之后,即可进入系统。其实登陆应该放在spring的 阅读全文
posted @ 2017-02-20 12:26 oneqhw 阅读(11721) 评论(5) 推荐(0) 编辑
摘要: 前言 之前也说过,工作做的开发都是基于公司现有的框架,心里很没底。所以一直想自己能够搭建出ssm框架。经过多次尝试,终于成功了。这边文章将从两个方面进行,一是框架搭建,二是简单的增删查改。 正文 1.环境搭建 这里没有采用采用现在流行的maven方式,而是将需要的jar放在web_inf\lib下面 阅读全文
posted @ 2017-01-22 22:12 oneqhw 阅读(2913) 评论(4) 推荐(2) 编辑
摘要: 前言 最近比较松懈,下班回家后也懒得学习了。今晚实在是看不下去了,争取时间学习。社会上有这么多的资源,就看谁能抢的多吧。今天就说说MyBatis的动态SQL吧 正文 动态 SQL 通常要做的事情是有条件地包含 where 子句的一部分。比如: 如果这些条件没有一个能匹配上将会怎样?最终这条 SQL 阅读全文
posted @ 2017-01-13 00:29 oneqhw 阅读(408) 评论(0) 推荐(0) 编辑
摘要: 前言 感觉学习进度还是比较慢啊,一整天的学习效率不是很高,一会看电视,一会喝茶,对自己的要求不严格...今天就说说关联表数据的插入以及别名的使用。 正文 1.关联插入 之前,我在数据库中已经创建了一张users表,现在我新增了一张手机表cellphone,用来记录用户手机的信息,结构如下所示: 其中 阅读全文
posted @ 2017-01-08 21:23 oneqhw 阅读(318) 评论(0) 推荐(0) 编辑
摘要: MyBatis增删改查操作,字段映射 阅读全文
posted @ 2017-01-07 21:39 oneqhw 阅读(272) 评论(0) 推荐(0) 编辑
摘要: Mybatis学习,数据库设计,文件配置,查询测试。 阅读全文
posted @ 2017-01-06 15:54 oneqhw 阅读(311) 评论(0) 推荐(0) 编辑
摘要: package org.tonny;import java.util.Timer;import java.util.TimerTask;import android.app.Activity;import android.os.AsyncTask;import android.os.Bundle;i... 阅读全文
posted @ 2015-06-11 02:57 oneqhw 阅读(275) 评论(0) 推荐(0) 编辑
摘要: 自定义控件:1.定义控件的属性,atts.xml2.代码实现自定义控件的控制3.引用该控件首先定义相关的属性 然后,设置控件布... 阅读全文
posted @ 2015-06-09 23:59 oneqhw 阅读(204) 评论(0) 推荐(0) 编辑