2014年3月16日
摘要:
1,Mahout ASF(Apache Software Foundation)开源项目,提供可扩展的`机器学习`--(ML,Machine Learning多领域交叉学科,涉及概率,统计,逼近,凸分析,算法复杂度等多门学科,专门研究计算机怎么模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,是人工智能的核心,是计算机具有智能的根本途径,是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域)领域经典算法的实现,旨在帮助开发人员更加方便快捷地创建智能应用程序;2,Snappy 高速压缩解压缩开发包 ,类似LZO,压缩解压缩速度高,压缩率相对其他压 阅读全文
2014年3月15日
摘要:
1,Suse CDH4安装wget archive.cloudera.com/cdh4/one-click-install/redhat/6/x86_64/cloudera-cdh-4-0.x86_64.rpmcloudera-cdh4.repo内容[cloudera-cdh4]name=Cloudera's Distribution for Hadoop, Version 4baseurl=http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/4/gpgkey = http://archive.cloudera.com/cdh4/r 阅读全文
摘要:
cdh4 install for Centos6那个最美的年代,最好的时光,一路梦想,一路流泪,流的不会是懦弱的泪,而是对奋斗的寄于;1,repo配置>>>/etc/yum.repo/wget http://archive.cloudera.com/cdh4/redhat/6/x86_64/cdh/cloudera-cdh4.repo或是wget archive.cloudera.com/cdh4/one-click-install/redhat/6/x86_64/cloudera-cdh-4-0.x86_64.rpmyum --nogpgcheck localinstall 阅读全文
摘要:
春天来了,小草发芽了,花儿开了,你还在等什么?人家都自驾游了,ruiy可还是徒步游的,并且还留着汗+油;什么是生活,我的理解就是跟着gd生,跟着gd活,可是讲到这我又自恋了,人家开二会也没想起我来,没想起我还在wj呢!干吧,不扯了,家乡的中分强又不认识我,不是小朋友谈的那个光头强哦;言归正传,不好意思开小差了,还没入正题,耽误大家时间了(自恋了),我这人就这毛病,你爱理理,不理拉倒,疯癫自在逍遥游!扯归扯,只是个前奏,爱学习,爱生活的passing>>>>let's Go..............1,利用Win-x,系统下的管理规范API工具,集合C函数set 阅读全文
2014年3月13日
摘要:
libhadoop.so其实是后面安装impala时要用到此处配置环境变啦时注意 下export CLASSPATH=.:$JAVA_HOME/lib/tools.jar:$JAVA_HOME/lib/dt.jar:$HADOOP_LIB/native/libhadoop.so版本及准备我部署的是hadoop-2.0.0-cdh4.2.0.tar.gz,下载地址为http://archive.cloudera.com/cdh4/cdh/4/hadoop-2.0.0-cdh4.2.0.tar.gz。在http://archive.cloudera.com/cdh4/cdh/下还可以下载到CDH 阅读全文
摘要:
cdh4 yum安装;http://www.cloudera.com/content/support/en/documentation/cdh4-documentation/cdh4-documentation-v4-latest.html根据cpuArch选择;x86-64 or i386;http://mirrors.163.com/CentOS/5/os/i386/CentOS/# 备份# mv /etc/yum.repos.d/CentOS-Base.repo{,.bak}# 修改# vi /etc/yum.repos.d/CentOS-Base.repo# CentOS-Base.r 阅读全文
2014年3月12日
摘要:
XNS协议IPX/SPX 是基于施乐的XEROX’S Network System(XNS)协议,而SPX是基于施乐的XEROX’S SPP(Sequenced Packet Protocol:顺序包协议)协议,它们都是由novell公司开发出来应用于局域网的一种高速协议。它和TCP/IP的一个显著不同就是它不使用ip 地址,而是使用网卡的phycial address即(MAC)地址。在实际使用中,它基本不需要什么设置,装上就可以使用了。由于其在网络普及初期发挥了巨大的作用,所以得到了很多厂商的支持,包括microsoft等,到现在很多软件和硬件也均支持这种协议。 阅读全文
摘要:
__BEGIN_DECLS..........__END_DECLS很多时候,为了使 C 代码和 C++ 代码保持互相兼容的过程调用接口,需要在 C++ 代码里加上 extern "C" 作为符号声明的一部分。而你看的这个 libc 里为了使代码更易懂,就用宏做了替换。可以用 gcc 的预处理开关 -E 验证一下。总;读头文件时,感到对此定义不是太理解,因此就找了点东西理解了下;简单理解C头文件中的__BEGIN_DECLS..........__END_DECLS;#if defined(__cplusplus) #define __BEGIN_DECLS extern 阅读全文
2014年3月11日
摘要:
Hbase有两种运行模式:standalone和distributed。standalone模式参见Quick Start Guide。以distributed模式设置Hbase,需要编辑Hbase conf目录中文件。 无论哪种模式,都需要编辑conf/hbase-evn.sh来告诉使用哪个java。并且可以设置Hbase环境变量如heap size、JVM的其他选项等。设置JAVA_HOME来指定java的安装目录。 Standalone Mode默认的运行模式。在该模式下,Hbase不会使用HDFS,而是使用本地文件系统。它在同一个虚拟机中运行所有Hbase daemon和本地ZooKe 阅读全文
2014年3月10日
摘要:
主题>>: cloudEra hadoop Ecosystem sim Unscramble; ruiy哥个人理解总结,其实我无非也还是站在那"砖家/叫兽"的肩上瞎扯扯(至于名词我就乱引用了,木关它神马领域?在此用用吧,你要是想改改啥,随你吧,搞技术的随意最好),不是巨人肩啊,如今已经没有牛顿了,更没他的肩给我们搭,哈哈其实我也是瞎说下啦,请口下留情莫喷我,当然不排除有大牛,玩技术犹如庖丁解牛般...!,本文核心在于简单谈谈hadoop ecosystem,顺便简单搭建bigData analysis Platform测试环境,具体关于Hdfs,ndfs,Map 阅读全文
|