摘要：
在使用eventTime的时候如何处理乱序数据？我们知道，流处理从事件产生，到流经source，再到operator，中间是有一个过程和时间的。虽然大部分情况下，流到operator的数据都是按照事件产生的时间顺序来的，但是也不排除由于网络延迟等原因，导致乱序的产生，特别是使用kafka的话，多个分 阅读全文
摘要：
数据字典是oracle存放有关数据库信息的地方，几乎所有的系统信息和对象信息都可在数据字典中进行查询。数据字典是oracle数据库系统的信息核心，它是一组提供有关数据库信息的表和视图的集合，这些表和视图是只读的。它是随着数据库的建立而建立的，当数据库执行特定动作时数据字典也会自动更新。数据一览与数据 阅读全文
摘要：
一、什么是手工管理的备份与恢复？ 尽管在Oracle中，已经有了RMAN的备份与恢复。但是作为Oracle备份恢复的一种方式，我们将在本文中通过一个例子来为大家介绍如何使用手工的方式来完成Oracle的备份与恢复。**手工方式的本质是通过操作系统的cp命令完成，**但是在备份与恢复的时候，需要把数据 阅读全文
摘要：
一、Spark SQL简介 Spark SQL是Spark用来处理结构化数据的一个模块，它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。 为什么要学习Spark SQL？我们已经学习了Hive，它是将Hive SQL转换成MapReduce然后提交到集群上执行，大大简化 阅读全文
摘要：
一、什么是工作流？ 工作流（WorkFlow）就是工作流程的计算模型，即将工作流程中的工作如何前后组织在一起的逻辑和规则在计算机中以恰当的模型进行表示并对其实施计算。工作流要解决的主要问题是：为实现某个业务目标，在多个参与者之间，利用计算机，按某种预定规则自动传递。下面我们以“员工请假的流程”为例， 阅读全文
摘要：
一、Kafka持久化概述 Kakfa 依赖文件系统来存储和缓存消息。对于硬盘的传统观念是硬盘总是很慢，基于文件系统的架构能否提供优异的性能？实际上硬盘的快慢完全取决于使用方式。同时 Kafka 基于 JVM 内存有以下缺点： 对象的内存开销非常高，通常是要存储的数据的两倍甚至更高 随着堆内数据的增加 阅读全文
摘要：
Docker的日志分两类，一类是 Docker引擎的日志；另一类是容器日志。下面我们分别进行介绍。 一、Docker引擎的日志 Docker 引擎日志 一般是交给了 Upstart(Ubuntu 14.04) 或者 systemd (CentOS 7, Ubuntu 16.04)。前者一般位于 /v 阅读全文
摘要：
一、MongoDB用户认证机制简介 为了认证客户端，你必须要添加一个对应的用户到MongoDB。基本的步骤分为以下几步： 用户管理接口：db.createUser()方法可以创建一个用户，添加完成后可以分配角色给用户，第一个用户必须是管理员，用来管理其他用户。你也可以更新存在的用户，必须修改密码和权 阅读全文
摘要：
一、什么是Docker Compose? Docker Compose是一个用来定义和运行复杂应用的Docker工具。一个使用Docker容器的应用，通常由多个容器组成。使用Docker Compose不再需要使用shell脚本来启动容器，而使用服务编排的方式来管理容器。 Docker Compos 阅读全文
摘要：
一、什么是Weblogic WebLogic是美国Oracle公司出品的一个application server，确切的说是一个基于Java EE架构的中间件，WebLogic是用于开发、集成、部署和管理大型分布式Web应用、网络应用和数据库应用的Java应用服务器。将Java的动态功能和Java 阅读全文