2019年6月5日

Linux后台运行 nohup & > /dev/null

摘要: &指定命令为后台运行,在linux命令后,使用 &,命令执行的程序会在后台一直运行。运行过程中的内容会一直打印到标准输出。只能通过杀死进程来关闭。关闭终端后命令运行终止。 > 为重定向符,会把命令执行的输出内容重定向到指定的文件。>>同样为重定向符,内容会被追加到后面。 nohup 指定命令在终端关 阅读全文

posted @ 2019-06-05 21:51 at_today 阅读(4933) 评论(0) 推荐(0) 编辑

java异常

摘要: 一、概念 先上官方概念:异常就是一个表示阻止执行正常进行的错误或情况。就是说,我们的程序运行不了的情况。异常分为error和exception, error是系统错误,是java虚拟机抛出的,一旦发生程序就没法运行了,只能尽量优雅的终止程序; exception是由程序或者外部环境引起的错误,这些错 阅读全文

posted @ 2019-06-05 18:24 at_today 阅读(316) 评论(0) 推荐(0) 编辑

2019年6月1日

结构化数据序列化机制--Protocol Buffers

摘要: 什么是Protobuff;pb与xml,json的对比;使用pb进行序列化的步骤;pb使用过程中的坑:编码解码端proto文件必须一致,repeated修饰的字段在赋值时候的注意事项 阅读全文

posted @ 2019-06-01 11:10 at_today 阅读(1884) 评论(0) 推荐(0) 编辑

2019年5月31日

hadoop生态--Kafka

摘要: 分布式流处理平台,是一个分布式消息中间件系统。 一、jms 1、什么是jms java message service(java 消息服务):java程序需要异步发送消息的时候使用的服务。 用于异构系统之间的通信。 middleware,中间件,提供消息服务,部件之间的交互通过中间件完成,部件之间互 阅读全文

posted @ 2019-05-31 01:46 at_today 阅读(1569) 评论(0) 推荐(0) 编辑

2019年5月29日

hadoop生态--Hive(3)--内部表、外部表、分区表、桶表

摘要: hive内部表和外部表的区别,分区表和桶表的区别 阅读全文

posted @ 2019-05-29 17:52 at_today 阅读(761) 评论(0) 推荐(0) 编辑

hadoop生态--Hbase

摘要: 什么是HBase,Hbase有哪些特性,简单的工作机制 阅读全文

posted @ 2019-05-29 15:21 at_today 阅读(320) 评论(0) 推荐(0) 编辑

2019年5月24日

hadoop生态--ElasticSearch--ES操作

摘要: 抛开细节不提,记住ES就是一个数据库(只是整个数据库有些特殊,话说回来,哪个数据库没点自己的特点呢:) ),所以很多ES的中的概念我们可以类比普通的数据库来帮助理解和记忆,为了学习这个数据库呢,我们需要先了解几个概念 一、ES中几个重要概念: 索引:Index 注意不是luence中的索引的概念,相 阅读全文

posted @ 2019-05-24 17:48 at_today 阅读(511) 评论(0) 推荐(0) 编辑

Haoop生态--ElasticSeaarch(1)--ES预备知识(全文检索的概念、Lucence、倒排索引)

摘要: ES预备知识(全文检索的概念、、倒排索引、Lucence的索引过程、检索过程) 阅读全文

posted @ 2019-05-24 17:45 at_today 阅读(672) 评论(0) 推荐(0) 编辑

2019年5月22日

hadoop生态--Hive(2)--Hive的使用方式

摘要: hive的使用方式:本机hive交互、将hive启动为服务、脚本化运行(常用) 阅读全文

posted @ 2019-05-22 11:22 at_today 阅读(442) 评论(0) 推荐(0) 编辑

2019年5月20日

hadoop生态--Zookeeper

摘要: 一、Zookeeper是什么? Zookeeper是一种高效可靠的协同工作系统,它是一个基础组件,是一种服务组件,可以应用于各种场景。它可以提供的功能主要包括两个: 1、为Zookeeper的客户端(即任意使用zk的用户)管理少量数据,它存储的数据是<key, value>形式,key的格式类似目录 阅读全文

posted @ 2019-05-20 16:11 at_today 阅读(247) 评论(0) 推荐(0) 编辑

导航