大数据

http://ip.taobao.com/service/getIpInfo.php?ip=119.75.213.61

FTP地址:ftp://ftp1.linuxidc.com     http://linux.linuxidc.com/index.php 用户名:ftp1.linuxidc.com  密码:www.linuxidc.com

 

Hive 使用 HDFS 存储(sqoop导入导出RDBMS数据库),使用MapReduce执行,用hql作为查询语句
sqoop用于HDFS和数据库导入导出数据
hive使用的是Hadoop的HDFS(分布式文件系统),RDBMS是服务器本地文件系统
hive有点:可以通过类sql语句快速实现简单的MapReduce统计
麒麟软件  HBase


SpagoBI是一个商业智能平台,为商业智能项目提供了一个完整开源的解决方案。它涵盖了一个BI系统所有方面的功能包括:数据挖掘、查询、分析、报告、Dashboard仪表板。
BI软件是商业智能(Business Intelligence)软件的英文缩写
http://download.forge.ow2.org/spagobi/All-In-One-SpagoBI-5.1-21012015.zip  报表服务器
http://download.forge.ow2.org/spagobi/mysql-dbscript-5.1.0_19012015.zip
http://download.forge.ow2.org/spagobi/oracle-dbscript-5.1.0_19012015.zip    
https://jaist.dl.sourceforge.net/project/mondrian/schema%20workbench/3.14.0/psw-ce-3.14.0.0-12.zip
http://download.forge.ow2.org/spagobi/SpagoBIStudio_5.1.0_win64_19012015.zip  开发工具

Netty是一个高性能 事件驱动的异步的非堵塞的IO(NIO)框架,用于建立TCP等底层的连接,基于Netty可以建立高性能的Http服务器
Tomcat是一个Web服务器,它是采取一个请求一个线程,当有1000客户端时,会耗费很多内存。通常一个线程将花费 256kb到1mb的stack空间。
Node.js是一个线程服务于所有请求,在错误处理上有限制
Netty是一个线程服务于很多请求,如下图,当从Java NIO获得一个Selector事件,将激活通道Channel

客户端的流量首先会到达负载均衡服务器,由负载均衡服务器通过一定的调度算法将流量分发到不同的应用服务器上面,同时负载均衡服务器也会对应用服务器做周
期性的健康检查,当发现故障节点时便动态的将节点从应用服务器集群中剔除,以此来保证应用的高可用

负载均衡又分为四层负载均衡和七层负载均衡。四层负载均衡工作在OSI 模型的传输层,主要工作是转发,它在接收到客户端的流量以后通过修改数据包的地址信息将流量转发到应用服务器。
七层负载均衡工作在OSI 模型的应用层,因为它需要解析应用层流量,所以七层负载均衡在接到客户端的流量以后,还需要一个完整的TCP/IP 协议栈。七层负载
均衡会与客户端建立一条完整的连接并将应用层的请求流量解析出来,再按照调度算法选择一个应用服务器,并与应用服务器建立另外一条连接将请求发送过去,因此七层负载均衡的主要工作就是代理

posted @ 2018-12-15 16:48  苍天一穹  阅读(129)  评论(0编辑  收藏  举报