专家观察 | 朱荣泽：“统一存储，为云而生——基于Ceph的存储全(2)

我们拿OpenStack举例,对于OpenStack来说有很多需要使用存储后端的,NOVA虚拟机可以直接使用,虚拟机可以快速的启动,而不需要下载到本地再启动,因为下载会速度非常慢,我通过这个存储就可以很快,另外是一个新的平台也可以直接的使用整个集群的.

另外一个好处就是我经常存在这里,虚拟机启动以后可以减少整个数据的复制链路,就把整个语音操作下发到Ceph去做,这样就可以快速的去做,这边是使用RADOS,这边是MANLA.另外是个做一个计量,会把总的指标数据全部存下来,存在本地都没有很好的解决以后尊出的高可用,假如直接用这个对接就可以让你负责整个数据的分布.然后就是Ceph怎么做支持.

我们再来看一下为什么我们Ceph是开源首选的存储方案,作为它是一个开源的方案,这会吸引非常多的开发者,而且可编程性强,可以持续改进,可以在上面提供很多的创造力,做有创造性的一些工作,激发开发者的创造力,因为Ceph是一个分布式的,我可以对接一些存储系统,做更多的推荐,让Ceph帮我做底层的分布式和高可用高可靠,另外它是一个硬件无关的系统,好处可以激发架构师的创作力,比如我要实现减少你的工作负担,拿我应该使用怎样的服务器都可以配置的.

另外它是一个合适的架构根河市的技术,因为云平台对于扩展性还有元数据处理是非常强的,比如组件分布,对于Ceph来说可以部署在服务器上,这可以提高拓展性.

另外一个是元数据处理,我们知道一般的系统对于分块主要两种方式,第一个是做一次性的,计算出我到底板块错在哪里,还会做一个存储,一些商业的存储是查表.因为查表可以做很多高级特性,比如做消重、或者数据迁移、拍照等,但是Ceph里面就没有把原数据做表格的形式,而且全部通过计算得到的,这样是有一个元数据的.

还有一个是快照和克隆,对于OpenStack吸引力非常强,这样你就可以快速的创建一个虚拟机,而且你可以创建快照,这个是可以实现的.还有另外一个,因为Ceph社区是非常强大的,会有BP级别的块存储,30PB级别的对象存储这个都是社区的一些实践.

我们这边可能还会存在一些问题,就是分布式带来的复杂性,为什么带来复杂性,因为我们的分布式规模特别大,会对你的架构设计,因为你设计非常多的因素,特别像网络、硬件等等,主要是通过网上的架构设计.比如我们的网络架构,我后面怎么去做一个部署,怎么去分割网络的流量,提高它最大的性能,还有服务器配置,我怎么充分利用CPU、SSD还有一个网卡的性能.三者的性能要是能够均衡的,可以存储池进行规划,还有一个CRUSH MAP的设计,你要对自己集群的性能可靠性可用性要有一个权衡.还有你的数据流量也要权衡,还有一些自动化部署管理及优化.

另外一个问题,不同的Workload我们怎么优化,比如有些对容量有要求,所以我们可以做一些优化服务,比如硬件配置的优化,还有操作系统参数优化,因为我们知道有缺点会做一个调优,而且把它CPU全部榨干.

还有Ceph的参数优化,存储池配置优化,可以做一些代码的优化,还有架构优化.还有大规模部署的问题,比如你部署一两百台Ceph集群怎么做,像推土机一个小时部署起来,这涉及到Ceph集群生命周期管理,还有自动化图形部署工具.

这是常见的一些运维操作优化,比如我们遇到一种情况,我们做一个30PB的集群,几乎每周都会画换几块盘,操作非常频繁,这样我们就可以直接换盘操作直接放在我们的自动化管理界面上,快速的做一个换盘,不需要手动的换,这样可以避免你因为手动带来的误操作.

下面还有一个报警的工具.我们业提供产品,会有一个平台主要是做管理和部署,目标是一个人一小时交付大规模的Ceph集群,像服务器初始化都可以通过图形化的界面做操作,这是一个自动化部署安装流程,刚开始部署的时候可能每一步都是你需要敲命令或者用其他配置起来,通过图形化的界面可以把这些全部变更.

下面一些数据,还有故障排查,像网络故障,因为网络故障导致集群出问题,之前我们遇到一些非常奇葩的问题,比如交换机只能过小包不能过大包.硬件故障包括CPU等等,还有操作系统,大家可以在Mirantis直接下载.谢谢大家.

文章来自微信公众号：云计算开源产业联盟

（编辑：ASP站长网）