大数据安全与RANGER学习和使用
摘要：概述 再说ranger之前需要明白一下大数据的安全体系的整体介绍，安全体系其实也就是权限可控，先说说权限：权限管理的目标，绝对不是简单的在技术层面建立起用户，密码和权限点的映射关系这么简单的事，更重要的是要从流程合理性，业务隔离，实施代价，可执行性等方面进行考虑。单方面强调安全，结果往往并不理想。重
阅读全文
posted @ 2020-07-26 17:16
07 2020 档案
HIVE优化学习笔记
摘要：概述 之前写过关于hive的已经有两篇随笔了，但是作者依然还是一枚小白，现在把那些杂七杂八的总结一下，供以后查阅和总结。今天的文章介绍一下hive的优化。hive是好多公司都在使用的东西，也有好多大公司进行定制化二次优化，比如鹅厂的Thive等。所以学习hive至关重要，本文只针对大众版免费开源的h
阅读全文
posted @ 2020-07-25 21:58
HIVE执行引擎TEZ学习以及实际使用
摘要：概述 最近公司在使用Tez，今天写一篇关于Tez的学习和使用随笔。Tez是Apache最新的支持DAG作业的开源计算框架，它可以将多个有依赖的作业转换为一个作业从而大幅提升DAG作业的性能。Tez并不直接面向最终用户——事实上它允许开发者为最终用户构建性能更快、扩展性更好的应用程序。Hadoop传统
阅读全文
posted @ 2020-07-19 11:51
HIVE理论学习笔记
摘要：概述 参加了新的公司新的工作新的环境之后，本人必须学习更多的知识，所以稳固之前的知识和学习新的知识是重中之重，新的公司把hadoop大部分的组件都进行了架构源码深度改造，所以使用过程确实遇到一些麻烦，而写这篇随笔的目的就是记录之前学习的知识，并且作为学习新的架构的基础。就是本文说的hive组件。 H
阅读全文
posted @ 2020-07-18 18:52
端口状态 LISTENING、ESTABLISHED、TIME_WAIT及CLOSE_WAIT详解，以及三次握手四次挥手，滑动窗口（整理转发）
摘要：网上查了一下端口状态的资料，我下面总结了一下，自己学习学习： TCP状态转移要点 TCP协议规定，对于已经建立的连接，网络双方要进行四次握手才能成功断开连接，如果缺少了其中某个步骤，将会使连接处于假死状态，连接本身占用的资源不会被释放。网络服务器程序要同时管理大量连接，所以很有必要保证无用连接完全断
阅读全文
posted @ 2020-07-09 08:46
