调整服务器时间导致的ceph命令使用正常,但是rbd命令报错

        部署好openstack之后,ntp同步了服务器时间后,发现无法创建云硬盘,云硬盘一直显示在创建中,最后显示error.检查rabbitmq服务未发现异常,cinder-scheduler,cinder-volume服务日志里面都未发现错误.ceph -s检查ceph集群状态也是health_ok,一时无从下手,准备打开cinder的debug模式排查了,用rbd命令查看后端pool是否创建好rbd image时,发现rbd命令报错.

       报错如下:

cephx: verify_reply couldn't decrypt with error: error decoding block for decryption.

pipe(0x26d7fe0 sd=4 :55582 s=1 pgs=0 cs=0 l=1 c=0x26d8270).failed verifying authorize reply.

 

         最后发现所有的rbd命令均无法使用,但是ceph命令全部正常.搜索rbd的错误信息,官网说是个bug,链接如下:http://tracker.ceph.com/issues/9744.但是这个bug在官网是标记为已经解决的.

      问题解决:

            参照上述链接,最后把全部osd重启一遍,问题解决.

参考:

1  https://www.spinics.net/lists/ceph-users/msg16971.html

2   http://tracker.ceph.com/issues/9744