摘要: 原来一直用印象笔记记录学习中的问题,感觉很方便,尤其是格式上基本不用做什么调整。但是,突然有一天发现,曾经的笔记中的图片都变缺省图了···,才想起,软件都是有BUG的,重要的东西要备份,希望放在博客园里安全点 阅读全文
posted @ 2015-10-30 15:53 离线中 阅读(179) 评论(0) 推荐(0) 编辑
摘要: 1、当订阅由发布服务器集中管理时正常,而把这些订阅分由订阅服务器管理,在发布服务器初始化订阅时,这些订阅就会出现无法访问某地址的问题,即使添加Everyone的完全控制权限也无用。 2、SqlServer2012修改服务器名称方法:1.使用select @@ServerName可以看到当前数... 阅读全文
posted @ 2015-10-30 15:45 离线中 阅读(249) 评论(0) 推荐(0) 编辑
摘要: redis是当前比较热门的NOSQL系统之一,它是一个key-value存储系统。和Memcached类似,但很大程度补偿了memcached的不足,它支持存储的value类型相对更多,包括string、list、set、zset和hash。这些数据类型都支持push/pop、add/remove... 阅读全文
posted @ 2015-10-30 15:34 离线中 阅读(135) 评论(0) 推荐(0) 编辑
摘要: Redis本词条由“科普中国”百科科学词条编写与应用工作项目审核 。Redis是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。从2010年3月15日起,Redis的开发工作由VMware主持。从2013年5月开始,Redi... 阅读全文
posted @ 2015-10-30 15:30 离线中 阅读(189) 评论(0) 推荐(0) 编辑
摘要: NoSQL对于物联网来说,有几大优势的特性:1)灵活性:NoSQL的非结构化数据模型,能存储所有类型的新数据:事件、时序数据、文字、图像以及各种其他类型的数据。想要存储新类型的数据,不需要专门设计新的表,这就能更简单的处理快速变化的物联网应用产生的负责数据。2)水平扩展:NoSQL数据库的分布式存储... 阅读全文
posted @ 2015-10-30 15:21 离线中 阅读(1079) 评论(0) 推荐(0) 编辑
摘要: Hbase在生态系统中的位置Hbase存储的逻辑视图Hbase的存储格式Hbase写数据流程Hbase快速响应数据Hbase在生态系统中的位置 HBase位于结构化存储层,Hadoop HDFS为HBase提供了高可靠性的底层存储支持,Hadoop MapReduce为HBase提供了高性能的计算... 阅读全文
posted @ 2015-10-30 15:20 离线中 阅读(721) 评论(0) 推荐(0) 编辑
摘要: 如今Bigtable型(列族)数据库应用越来越广,功能也很强大。但是很多人还是把它当做关系型数据库在使用,用原来关系型数据库的思维建表、存储、查询。本文以hbase举例讲述数据模式的变化。传统关系型数据库(mysql,oracle)数据存储方式主要如下: ... 阅读全文
posted @ 2015-10-30 15:17 离线中 阅读(1846) 评论(0) 推荐(0) 编辑
摘要: 64位的linux装的hadoop是32位的,需要手工编译。遇到的问题描述:[root@db96 hadoop]# hadoop dfs -put ./inDEPRECATED: Use of this script to execute hdfs command is deprecated.Ins... 阅读全文
posted @ 2015-10-30 15:04 离线中 阅读(878) 评论(0) 推荐(0) 编辑
摘要: 总结+问题汇总 Keep:1. 保持每天都有可交付的进度;Problem:1. 遇到问题,用了挺长一段时间解决后,没有及时的记录解决方案,结果回头整理笔记的时候又多用了时间,虽然理解更深刻了;2. 遇到问题卡死的时候转变一下思路,比如在了解到64位Linux系统安装Hadoop的时候需要将32位的H... 阅读全文
posted @ 2015-10-30 15:03 离线中 阅读(149) 评论(0) 推荐(0) 编辑
摘要: 基于前面的所有配置,利用C#连接HbaseHadoop中的HBase有多种数据访问方式,ubuntu(国际音标 [uːˈbuːntuː])或者CentOS系统下可以用hbase shell查看操作hbase数据库,但windows平台下需要用thrift对它进行访问。1.定位到上一篇中Thrift-... 阅读全文
posted @ 2015-10-30 15:02 离线中 阅读(643) 评论(0) 推荐(0) 编辑
摘要: Thrift的安装和配置1. 点击下载Thrift-0.9.1.tar.gz和Thrift-0.9.1.exe,然后将Thrift-0.9.1.tar.gz 解压到指定位置,这里解压到“/usr/hadoop/thrift-0.9.1”。然后定位到该目录下,依次执行以下指令进行 Thrift-0.9... 阅读全文
posted @ 2015-10-30 14:58 离线中 阅读(180) 评论(0) 推荐(0) 编辑
摘要: Hbase和Zookeeper的安装和配置Zookeeper的安装和配置在Hbase安装前需要提前安装并配置好Zookeeper如需下载最新版请到官方网址,也可以点击这里下载版本 zookeeper-3.5.1-alphaZookeeper的安装和配置十分简单, 既可以配置成单机模式, 也可以配置成... 阅读全文
posted @ 2015-10-30 14:55 离线中 阅读(619) 评论(0) 推荐(0) 编辑
摘要: Hadoop下载+安装+配置声明:此文章经过多次修改,初始为Hadoop-2.7.1版本,后改为Hadoop-2.6.0版本,文中出现的截图中有Hadoop-2.7.1请视为Hadoop-2.6.0!1.选择Hadoop版本并下载在Hadoop下载前请参考Hadoop和Hbase的版本匹配表,提前考... 阅读全文
posted @ 2015-10-30 14:47 离线中 阅读(1242) 评论(0) 推荐(0) 编辑
摘要: Linux 的版本选择(文摘) 随着Linux不断发展,Linux所支持的文件系统类型也在迅速扩充。很多的数据中心服务器上都运行着Linux,可以节省大量的许可证费用及维护费用。但伴随着Linux新版本的发行,其中每一个不同版本的Linux所支持的文件系统类型都有所不同。 对于这种情况来说,Li... 阅读全文
posted @ 2015-10-30 14:24 离线中 阅读(1039) 评论(0) 推荐(0) 编辑
摘要: 需求:在两个不同的SQL SERVER 2012的服务器之间进行数据访问和更新。我们需要把SourceData的数据插入到TargetData的服务器上去,一天执行一次任务。我们的首选方案是在两个服务器之间建立链接服务器。 操作:定时全量的把SourceData的数据插入到TargetData... 阅读全文
posted @ 2015-10-30 13:24 离线中 阅读(2564) 评论(0) 推荐(0) 编辑
摘要: 发布订阅份为两个步骤:1、发布。2订阅。首先在数据源数据库服务器上对需要同步的数据进行发布,然后在目标数据库服务器上对上述发布进行订阅。 发布订阅份为两个步骤:1、发布。2订阅。首先在数据源数据库服务器上对需要同步的数据进行发布,然后在目标数据库服务器上对上述发布进行订阅。 发布需要用实际的服务器名 阅读全文
posted @ 2015-10-30 13:12 离线中 阅读(449) 评论(0) 推荐(0) 编辑