10 2017 档案

【大数据系统架构师】1.4 大数据协作框架
摘要：1.4.1 数据转换工具Sqoop 1.4.2 文件收集框架Flume 1. Flume设计架构 2. Flume初步使用 3. Source/Channel/Sink 4. Flume项目架构 5. Flume实战案例 1.4.3 任务调度框架Oozie 1.4.4 大数据WEB工具Hue 阅读全文
posted @ 2017-10-24 20:19 沙漏哟 阅读(272) 评论(0) 推荐(0) 编辑
设计一个MQ的考虑点
摘要：转自： https://segmentfault.com/a/1190000004461970 序 这里总结下MQ的研究点，以及如果要自己设计一个MQ应该考虑的因素。 考虑点 1、远程通信功能 （1）逻辑通信协议：STOMP, AMQP, MQTT, Openwire, SSL, and WebSo 阅读全文
posted @ 2017-10-16 16:56 沙漏哟 阅读(477) 评论(0) 推荐(0) 编辑
Tair
摘要：简介 tair 是淘宝自己开发的一个分布式 key/value 存储引擎. tair 分为持久化和非持久化两种使用方式. 非持久化的 tair 可以看成是一个分布式缓存. 持久化的 tair 将数据存放于磁盘中. 为了解决磁盘损坏导致数据丢失, tair 可以配置数据的备份数目, tair 自动将一 阅读全文
posted @ 2017-10-16 13:46 沙漏哟 阅读(1215) 评论(0) 推荐(0) 编辑
HSF的原理分析
摘要：转自：http://blog.csdn.net/qq_16681169/article/details/72512819 一．HSF的基本概念 HSF全称为High-Speed Service Framework，旨在为淘系的应用提供一个分布式的服务框架，HSF从分布式应用层面以及统一的发布/调用方 阅读全文
posted @ 2017-10-13 09:41 沙漏哟 阅读(2779) 评论(0) 推荐(0) 编辑
【大数据系统架构师】0.3 MySQL数据库
摘要：1. MySQL的基本操作 2. SQL语句 3. 高级查询 1）聚合函数、分组查询 2）联合查询、连接查询 3）子查询 4. 高级应用 1）视图与索引 2）数据可视化管理 5. 使用JDBC操作数据库 6. Linux下的MySQL环境配置 阅读全文
posted @ 2017-10-07 21:30 沙漏哟 阅读(188) 评论(0) 推荐(0) 编辑
【大数据系统架构师】0.1 Java编程基础
摘要：1. 初识Java 2. Java语法 快速入门点我 2.1 数据类型和运算符 2.2 流程控制语句 2.3 数组 2.4 类和对象 2.5 OOP三大特性 2.6 集合框架与泛型 2.7 反射机制 2.8 多线程处理 2.9 Socket网络编程2.10 Linux下的Java环境配置 阅读全文
posted @ 2017-10-07 21:27 沙漏哟 阅读(246) 评论(0) 推荐(0) 编辑
【大数据系统架构师】0.2 Linux基础
摘要：1. Linux基本环境 1.1 大数据Hadoop前置大纲讲解 1）Linux系统，基本命令 2）Java语言，JavaSE相关知识 3）MySQL基本的DML和DDL 1.2 常见Linux系统、安装VMWare及虚拟机 1）重要的网站，大数据领域，hadoop发行版本，有公司Cloudera 阅读全文
posted @ 2017-10-07 21:23 沙漏哟 阅读(422) 评论(0) 推荐(0) 编辑
【大数据系统架构师】学习目录
摘要：0. 大数据相关预备课程 0.1 Java编程基础 0.2 Linux基础 0.3 MySQL基础 1. Hadoop开发技术基础 1.1. Linux基础 1.2 大数据基础Hadoop 2.X 1.3 大数据仓库Hive 1.4 大数据协作框架 1.5 分布式数据库HBase 2. Hadoop 阅读全文
posted @ 2017-10-07 13:46 沙漏哟 阅读(824) 评论(0) 推荐(0) 编辑
【图灵学院15】极致优化-高性能网络编程之BIO与NIO区别
摘要：一、Java IO概念 1. 一个http请求节点 数据传输 1）网络传输 TCP、UDP 2）通信模型 BIO、NIO、AIO 数据处理 3）应用协议 HTTP、RMI、WEBSERVICE、Redis、JMS 4）序列化协议 JSON、javaobject、Hession 5）业务处理 serv 阅读全文
posted @ 2017-10-06 20:36 沙漏哟 阅读(602) 评论(0) 推荐(0) 编辑
【相声】套路研究之——《郭大文豪》
摘要：开场： 场下观众开始送东西，有一个男观众上前要握手。 （郭握手后，调侃。） 郭：没拿东西握手。 （男观众从口袋里掏出几百款钱） 于：给钱给钱啊。 （工作人员上前劝阻。） 郭：给钱不行。谢谢。 于：我们只卖艺不卖身。 （女观众上前送了一个白色卡片物体） 郭：房卡呀！（仔细观察后）要不你们演吧，我有点事 阅读全文
posted @ 2017-10-06 19:08 沙漏哟 阅读(390) 评论(0) 推荐(0) 编辑
【TED演讲】阿帕玛･饶：（幽默的高科技艺术）
摘要：身为艺术家和TED Fellow的阿帕玛･饶对熟悉的事物以惊奇的幽默的方式进行再次想像。通过和索伦･普尔兹的合作，她创作出一系列高科技的艺术作品－一个会发邮件的打字机，一个让你在屏幕上消失而跟踪拍摄你的摄像机－这些让寻常事物充满了趣味和互动性。 产品1：“叔叔电话” 叔叔总是让我帮他做事，开灯，买包 阅读全文
posted @ 2017-10-05 13:32 沙漏哟 阅读(230) 评论(0) 推荐(0) 编辑
幽默感也有套路：可用数学模型量化
摘要：摘自： https://wap.ithome.com/html/297978.htm 我们如何量化幽默感呢？它是如此复杂又个性化。来自阿尔伯塔大学的研究者们为此量身定做了一个数学模型，发现幽默或许不仅仅关乎个人，还与演化和社会信息交流有关。 “这的确是第一篇用量化理论来研究幽默的论文。”阿尔伯塔大学 阅读全文
posted @ 2017-10-05 12:50 沙漏哟 阅读(458) 评论(0) 推荐(0) 编辑
【沽泡学院07】基于ElasticSearch搜索附近的人
摘要：1. 为什么要选择ElasticSearch 1)ElasticSearch 优点： 分布式、实时的、Push replication 完全支持Apache Lucene的接近实时的搜索 处理多租户（multitenancy）不需要特殊配置，而Solr则需要更多的高级设置 Gateway概念，使备份 阅读全文
posted @ 2017-10-04 20:16 沙漏哟 阅读(1330) 评论(0) 推荐(0) 编辑
【图灵学院13】大型公司面试必答之数据结构与算法
摘要：AAA 阅读全文
posted @ 2017-10-04 19:31 沙漏哟 阅读(381) 评论(0) 推荐(0) 编辑
【图灵学院09】RPC底层通讯原理之Netty线程模型源码分析
摘要：1. dubbo 2.5.3 netty 3.2.5.Final 阅读全文
posted @ 2017-10-04 14:12 沙漏哟 阅读(433) 评论(0) 推荐(0) 编辑
【图灵学院10】高并发之java线程池源码分析
摘要：1. 提纲 1）线程池的模块结构 2）示例&原理解析 2. 问题 1）线程池包含哪些东西 2）线程池的运作原理 3）调度线程池的运作原理 4）线程池怎么实现FixRate，FixDelay，他们之间的区别 5）任务怎么取消 3. 源码解析 3.1 线程池框架 接口简介： java.util.conc 阅读全文
posted @ 2017-10-04 13:41 沙漏哟 阅读(1093) 评论(0) 推荐(0) 编辑
【图灵学院02】大型互联网技术之数据库分库分表
摘要：1. 介绍原理 1.1 数据库介绍 Oracle： Oracle很强大，一台还是满足不了现有的一个业务、多台Oracle费用，国美一年给甲骨文500多万。 MySQL：免费、广泛（oracle收购） 1.2 集群 集群：并发问题？服务高可用、分组 mysql-proxy官方： 读写分离。解决了高并发 阅读全文
posted @ 2017-10-04 01:55 沙漏哟 阅读(386) 评论(0) 推荐(0) 编辑
【图灵学院01】Java程序员开发效率工具IntelliJ IDEA使用
摘要：1. 什么是IDEA? IDEA， Java智能IDE。 2. 为什么要使用？ IDEA的优点： 1）智能选取 2）导航模式 3）历史记录 4）重构 5）编码辅助 6）智能排版，控制 7）智能代码，查找，导航，编辑，自定义 总结：快捷、搜索、分析、定位、重构、高效 3. 怎么使用？ 1）远程调试 开 阅读全文
posted @ 2017-10-04 00:48 沙漏哟 阅读(283) 评论(0) 推荐(0) 编辑