2013年11月6日
摘要: 2013.8.20-22 DSAL暑期学术报告(小结)2013-09-16 20:26:44|分类:默认分类|字号订阅冯boss:1.热点问题。把握住一个热点,可以迅速崛起一门行业。比如,阿里的崛起,淘宝的成功。 当前热点:①大数据。分支:大数据的计算,存储,安全及传输。决策,导读,优化,控制与管理。压缩,感知,学习及生物计算。 判断是否是热点问题:看大的倾向trend,如果大家都在做的,一定是热点的问题。IBM大数据平台和应用程序框架。 分布式文件系统+智能化技术(局限于小城市,大城市的条化程度太高) 2.多核,DRAM&&PCM 统一存储控制器。 安全性+元数据管理(负载均 阅读全文
posted @ 2013-11-06 08:58 ″ Jerry。 阅读(204) 评论(0) 推荐(0) 编辑
摘要: 关于xshell其实如果想connection通的话,必须需要设置的两个地方如下图:一个是登陆目的主机的IP地址,以及登陆使用的账号和密码另一个就是需要设置代理服务器,类型和端口号是对应的如http1.1对应的是9001具体对应端口号自己可以从网上查。 阅读全文
posted @ 2013-11-06 08:57 ″ Jerry。 阅读(506) 评论(0) 推荐(0) 编辑
摘要: rpc函数参数及返回值的传递跟普通本地环境下的函数调用还是有很大区别的。本文着重讨论多线程(rpcgen -M)环境下缓冲区(字符串)是怎么传递的。下面的例子test中client传“hello“给server,server统计接受的client请求数,并返回“hello“+请求数给client。显然,client与server之间传递的消息都是缓冲区(字符串),而不是基本的定长的数据类型。这是test.x/* rpcgen -M test.x */const MAXLEN = 255;typedef string filename;program test{version test_ver{ 阅读全文
posted @ 2013-11-06 08:56 ″ Jerry。 阅读(1050) 评论(0) 推荐(0) 编辑
摘要: 1。可以使用yast2下的界面窗口,但是不建议,里面问题比较多2.首先是必须安装nfs-kernel-server,这个如果是虚拟机的话,可以直接用虚拟光盘,和实际光盘是等价的。安装命令是:zypper install nfs-kernel-server3。安装完成之后,开始编辑/etc/exportfs 文件,添加需要共享的目录,然后设定需要共享给的用户ip,*代表所有的用户,具体的关键字的释义可以看整理文档。首先需要创建该目录,mkdir -p /software/suse然后/etc/exports下添加 /software/suse *(rw,sync,root_squash,no_s 阅读全文
posted @ 2013-11-06 08:55 ″ Jerry。 阅读(2606) 评论(0) 推荐(0) 编辑
摘要: 每项 RPC 服务都会在注册表中为自己配置一个通用的唯一标识符 (UUID)(类似于全局唯一标识符 GUID)。UUID 是一种常用标识符,各项服务都有一个唯一的 UUID,且在所有平台上通用。当一项 RPC 服务启动时,它会获得一个可用的高端口,并以其 UUID 在该端口注册。有些服务随机使用高端口;而有些服务却每次都尽量使用相同的高端口(如果这些高端口可用)。在服务的生存期内,端口的分配是静态的。当一个客户端要与某特定 RPC 服务通讯时,它无法事先确定该服务在哪个端口上运行。该客户端会先建立一个到服务器端口映射器服务(在 135 上)的连接,并利用该服务的 UUID 请求所需服务。端口映 阅读全文
posted @ 2013-11-06 08:54 ″ Jerry。 阅读(971) 评论(0) 推荐(0) 编辑
摘要: 文件类型:文件类型是-,表示这是一个普通文件; 关于文件的类型,请参考:《Linux 文件类型和文件扩展》 文件权限:文件权限是rwxr-xr-x ,表示文件属主可读、可写、可执行,文件所归属的用户组可读可执行,其它用户可读可执行; 第一字段:inode 第二字段:文件种类和权限; 第三字段: 硬链接个数; 第四字段: 属主; 第五字段:所归属的组; 第六字段:文件或目录的大小; 第七字段和第八字段:最后访问或修改时间; 第九字段:文件名或目录名 阅读全文
posted @ 2013-11-06 08:51 ″ Jerry。 阅读(242) 评论(0) 推荐(0) 编辑
摘要: 目前实验室学习的东西有:1.首先对于某些成品需要了解,对其代码等也要做深入的分析,看看人家是如何实现的代表是Lustre,GPFS,Ceph三种。2.热点问题,所谓热点问题,其实就是如何处理负载均衡的问题,也就是选择一个可以使系统更充分的利用,更快的I/O速率。3.元素集群,其实和分布式的性质类似,都是通过某种策略,使得多台存储器或者计算机可以并行的工作,提高速率4.驱动的开发工作,一般是给予linux内核的编程开发,需要深入学习,这也是上述几个问题落到实处的必备知识。5.系统的搭建,需要师兄的帮助,迅速的搭成环境才能去学习开发 阅读全文
posted @ 2013-11-06 08:49 ″ Jerry。 阅读(147) 评论(0) 推荐(0) 编辑
摘要: a brief discripsion of pnfs2013-07-03 10:44:43|分类:默认分类|字号订阅 the traditional NFS performancepNFS working like above which use a metadata ,and the traditional one use the filer heads which set in the data path that become the bottleneck of the storage . 阅读全文
posted @ 2013-11-06 08:48 ″ Jerry。 阅读(135) 评论(0) 推荐(0) 编辑
摘要: 可以看到本实验室使用的是局域网,外网的主机被设置为192.168.0.1,自己的主机是可以设置从192.168.0.2----192.168.0.255之间的一些地址,而dns也就是华科的本校的默认dns设置为202.114.0.242,这个是需要记住,或者也可以用彗星DNS优化其来查询,搜索域设置为8.8.8.8实际上是谷歌的dns地址,范围比较广一点!另外,在查询是否链接通畅的时候,学长在teminal下用了几个长用的命令,包括ifconfig,route,ping等等,以后详细补充这些命令的使用技巧!ping 一个地址的时候,在linux下一次是有很多个数据包,实际上如果不采取操作的话, 阅读全文
posted @ 2013-11-06 08:47 ″ Jerry。 阅读(241) 评论(0) 推荐(0) 编辑
  2013年11月5日
摘要: start from init_mlt_rwlock();1.初始化mlt表的读写锁。2.初始化互斥锁Priorty_lock,使rpc线程优先于main函数的thread。2.5调用init_migrate_ls()函数,将Migrate_ls.state置为1(修改的时候加上互斥锁)3.得到本地的MDS的id,得到主MDS的id(通过调用conf_get_num()函数)4.创建添加mds的新线程,线程入口地址是newmdsadd_prc()函数。(ps:如果rpc调用已经存在则无动作,否则是第一次加入mfs,因此创建新线程)5.摧毁优先锁Priorty_lock(代码中连续两行, p.. 阅读全文
posted @ 2013-11-05 09:28 ″ Jerry。 阅读(552) 评论(0) 推荐(0) 编辑