百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

VSAN在某银行用户的现场实测效果,性能完胜Oracle Exadata

ccwgpt 2025-02-21 12:27 36 浏览 0 评论

【编者按】

母亲节快乐!

本篇文章来自微信公众号"DT时代",原文标题为《超越期望 一次让客户“惊讶”的测试!》,感谢作者王海峰的授权转发。里面的数据来自于VMware中国的U2VL团队一次非常棒的实测,是在用户现场做的。可以看到VSAN不仅适用于OLTP类别的关键业务应用,也可以适用于一些BI(商业智能)分析的应用。文章有少量修改。

顺便说一句,作者自己也是一位母亲,并在母亲节当天在她的微信公众号"王海峰"发表了《向我的三位妈妈致敬……》一文,写得真诚感人,感兴趣的读者可通过查找公众号获取。

---Begin---

8小时太长 3小时可否

这次测试就是以这个银行的实际生产系统的老大难应用“客户关系管理(CRM)系统”为例,数据也都是脱敏后的真实数据

数据库是Oracle10gAIX,上,有超过52亿的数据库记录数,数据库的数据量达到600GB,每天有50GB的增量数据的日常处理

起初,该银行的日终数据跑批作业在 UNIX 生产平台上,耗时 8个多小时,这个时间还是有些长

如果采用新技术,将 Oracle数据库运行在基于可扩展分布式存储的虚拟化平台上,是否满足逐步增长的业务需求及可控的高性价比?

紧接着,该银行又用几个月进行了测试,在 1/4 配置最大容量的Oracle Exadata X5-2 的测试,在Oracle一体机上的测试结果是,耗时 5 小时,离3小时还是有些距离

能否跑进3小时?该银行这次找的是VMware,试试在U2VL + VSAN运行Oracle 数据库的耗时吧。

U2VLVMware关键业务团队对企业新一代 IT 基础架构建设提出的一种策略,将原来运行在 UNIX 架构(或其它封闭系统)上的应用和数据迁移到以虚拟化为核心技术搭建的基础架构上,在此基础上将传统的以硬件为主的数据中心(HDDC)向软件定义的数据中心SDDC)和/或混合云服务(Hybrid Cloud Services)的方向演进,最终成为关键业务稳定可靠的云平台

之前,VMware公司大中华区一个团队对U2VL+VSAN严谨测试,DT君也发了Oracle 数据库跑在 VSAN 6中的性能和高可用性情况。(全文《一次测试 为何让Vmware美国专家Amazing?》参见http://mp.weixin.qq.com/s?__biz=MzA5MDUyODc4OA==&mid=208465980&idx=1&sn=
e42c378a1e40336132323244405d8e8c&scene=21#wechat_redirect , 如果只看结果,可查看内部链接:VMworld 2015对VSAN说了些啥?(附赠:Oracle RAC在VSAN上的性能))

当然,那次测试是在实验室中,具体到应用中的结果又如何?在这样的新平台上的跑批性能,最重要的是,看日终数据跑批作业要在3小时以内。

令人惊讶的不仅是耗时降低比例

U2VL + VSAN的方案测试包括基准性能测试、可移植性测试、性能测试、可用性测试、可管理性测试。

从信息收集、测试环境准备、测试验证到总结,基本用了3个月,在数据分析和测试结果后,这家银行对收到意想不到的测试效果,并立刻使用。

一、先从基础的测试环境搭建开始

基本步骤就是:硬件设备就绪(主要是VSAN主机与X86服务器),开始网络连接,安装vSphere,接下来部署 vCenter Server 6Appliance,添加 3 台主机至 vCenter Server;然后配置相关网络,配置 VSAN,创建存储策略,创建 VM1,安装 OracleLinux Server 6.6,通过克隆创建 VM2,克隆创建 VM3,安装配置 Oracle12c RAC。

这里重点强调的是,VSAN的部署非常简单,用法与vSphere HA一样简单

二、正式的测试开始,先看基准性能测试

每台 ESXi 主机上创建一个 VM,并安装 OralceLinux Server 6.6 ;每个 VM 在千兆网络上创建 vmxnet3 虚拟网卡 eth0,每个 VM 在万兆网络上创建 vmxnet3 虚拟网卡 eth1;各个 VM 之间运行 iperf 测试网络带宽。

测试的结果是,千兆网络的平均速率是924Mbps,万兆网络的平均速率9.33Gbps。由此看出,网络速度达标。

在这样的基础上来测试VSAN的 IOPS,具体方法是:在每台 ESXi 主机上创建一个 VM,安装 OralceLinux Server 6.6;然后设置参数:数据块大小是4K,VSAN 存储策略- FTT =1 & StripeWidth = 4;

紧接着设置以下5个测试场景,使用 fio 进行性能测试,记录 IOPS

看看测试结果:

从这个结果可以看出,按照4K顺序读:单节点 IOPS> 13 万,3 节点 IOPS > 39

三、兼容性和可移植性验

测试方法还是,每台 ESXi 主机上创建一个 VM,安装 OracleLinux Server 6.6,每个 VM 在千兆网络上创建 vmxnet3 虚拟网卡 eth0,每个 VM 在万兆网络上创建 vmxnet3 虚拟网卡 eth1。

第一个VM安装配置 Oracle 12c RAC,可用模版复制到其他VM,在这里,数据迁移并未特别优化:生产系统 expdp 导出数据,测试系统 impdp 导入数据。

从图中自然可以看到测试结果,在4 dump 文件,总数据量 588GB,总记录数 5,234,013,087 条,导入数据总耗时 4 小时 19 12

这表明,U2VL + VSAN 环境下,应用程序和数据库兼容性和可移植性通过。

四、CRM日终数据跑批作业耗

关于CRM日终数据跑批作业测试方法是这样,第一天导入全库数据,容量为588GB,

以第二天的增量数据进行跑批,增量数据容量 50GB,依次经历拉数、载数、数据清洗、主过程、报表生成 5 大过程,然后对照生产系统、Exadata系统、 U2VL + VSAN 平台的跑批处理时间。

结果如下:

U2VL + VSAN 平台上 CRM日终数据跑批作业耗时 1 小时 48 分钟

U2VL + VSAN 平台上 CRM日终数据跑批作业各过程耗时大幅减少,降低了82%

1小时48分钟,顺利实现该银行CRM日终数据跑批作业3 小时内的目标

五、高可用测

高可用的测试要从计划内停机、计划外停机以及VSAN发生故障的时候来验证。

1计划内停机的方法,如图所示,在线迁移 VM1 至主机 ESXi-02上,将虚拟机在主机间在线切换,这个过程耗时16秒,无需停机。

2、 如果是计划外停机,比如模拟主机故障,数据库节点自动在其它主机上启动并进行数据库修复

重启主机 ESXi-01,数据库节点 VM1 在主机ESXi-02上重新启动,数据库自动修复后,恢复服务,总计耗时 241

(还记得当时在实验室测试的数据吗?当时是251秒。)

3、 如果VSAN的组件发生故障怎么办?来看看关闭未运行 VM 的主机 ESXi-02查看各个 VM 运行状况,10分钟后,启动主机ESXi-02

可以看出关闭未运行 VM 的主机 ESXi-02,组件显示AbsentVM 运行时不受影响

启动该主机ESXi-02,组件显示Active

同样,如果关闭运行 VM3 的主机, ESXi-03非该主机上 VM1& VM2 不受影响,该主机上 VM3 不可用,若设置了 HA,则 VM3 在其它主机上重启。

高可用何以为高?其实就是在任何情况下停机,都可以实现业务不停顿的状态!

为什么会提这些时间点?因为不管是计划内停机的16秒,还是了不起的241秒!对于客户来说,他们只会关心业务是否中断,5分钟之内,后台跑着 Oracle RAC,几个节点间既要做到同时对外提供服务;同时内部担负原来服务器的负载,当一切恢复以后,再回到原来的状态;而这些对于用户来说是透明的

六、可管理

与 vRealize Operations 集成,可以降低 VSAN 故障排除难度,提高 VSAN 的监控能力,提供全面的管理功能。

另外,VSAN Health 插件提供有关 VSAN 子系统的故障排除和运行状况报告的免费工具。

结束

很显然,近三个月的时间,经历了严谨的几大测试后,这家银行可以将小型机上的 CRM 应用迁移至基于可扩展的分布式存储 VSAN 平台上,达到业务系统的技术要求,为新的数据中心选型奠定基础。

其实最初,该银行希望跑批耗时在3小时以内,没想到,实现这一目标的同时还带来更多的性能提升

从实验室开始测试,到银行实打实的应用测试,在U2VL+VSAN的新平台上,搭载关键业务的应用,高效稳定地运行 Oracle 数据库

新技术和新架构,带来的不仅是经济效益的提升,最重要的是,高可用的方案不断满足了银行快速增长的业务需求

当然这次测试中采用的是VSAN6.1版本,作为VMware超融合基础架构的基石,为虚拟化生产环境提供核心存储服务,有更好的企业可用性和数据保护功能,对于关键业务应用而言,是很理想的选择。

但如果采用最新的6.2版本呢?估计结果还更好吧,把软件定义架构的魅力发挥到极致,所以,继续期待有这样的实际应用测试

DT时代(微信号:DTtimes,蜂巢联盟成员,面向未来,关注数据时代的IT变革。联系本公众平台请发邮件:42790643@qq.com

---End---

欢迎关注如下微信公众号: V记云科技联盟成员

乐生活与爱IT(love_life_and_IT)-软件定义存储和虚拟化叶毓睿 VMware存储架构师亨利笔记(微信号:henglibiji)-容器和云原生应用张海宁,研发中心首席架构师最终用户计算(微信号:CHINAEUC)-桌面与应用虚拟化吴孔辉,VMware架构师疯云时代(微信号:crazycloudtime)-基础架构和应用服务臧铁军,VMware架构师IT那些事儿(IT-Review)尤贵贤,资深技术顾问

以及VMware官方微信

1、 VMware中国(微信号:vmwarechina)

2、 VMware中国研发中心(微信号:vmwarechinard)

3、 VMware招聘(微信号:vmwarehr)

-----------

微信公众号平台"乐生活与爱IT"在目前阶段,主要是分享软件定义存储(SDS),及VMware VSAN相关的文章,偶尔也会分享虚拟化、云计算、大数据,甚至生活类的好文章。欢迎投稿,我的QQ号:9269216。欢迎对SDS感兴趣的朋友,加入软件定义存储讨论 QQ群:122295009,可下载原创的一些文章,及其他有参考价值的文档。可直接搜索群号,或者扫描如下二维码:

同时,欢迎您加入 "开放讨论群-SDS&虚拟化" 微信群,并邀请其他对SDS和虚拟化感兴趣的朋友加入此微信群。可以通过添加如下管理员之一的微信号,建议添加管理员时,告知你的公司名和姓名,方便备注保存。

sdg8848

libo9538

dts0103

最后,欢迎您通过扫描关注微信公众号:“乐生活与爱IT”。

关注后,可以通过点击左下角的“文章目录”,详细了解如何查看历史文章。

也可单击左下角的"阅读原文",查看上一篇《VSAN的简单之美》

相关推荐

机器学习框架TensorFlow入门(tensorflow框架详解)

ensorFlow是一个广泛使用的开源机器学习框架,由GoogleBrain团队开发。它支持广泛的机器学习和深度学习任务,并且可以在CPU和GPU上运行。下面是一个使用TensorF...

合肥高新区企业本源发布量子机器学习框架VQNet 开辟量子机器学习的新领域

近日,高新区企业合肥本源量子计算科技有限责任公司通过研究混合实现变分量子算法和经典机器学习框架的可能性,全新开发了量子机器学习框架VQNet,可满足构建所有类型的量子机器学习算法,实现量子-经典混合任...

如何使用 TensorFlow 构建机器学习模型

在这篇文章中,我将逐步讲解如何使用TensorFlow创建一个简单的机器学习模型。TensorFlow是一个由谷歌开发的库,并在2015年开源,它能使构建和训练机器学习模型变得简单。我们接下...

机器学习框架底层揭秘:PyTorch、TensorFlow 如何高效“跑模型”

在使用PyTorch或TensorFlow时,你是否想过:这些深度学习框架底层到底是怎么运行的?为什么我们一行.backward()就能自动计算梯度?本篇将用最简单的语言,拆解几个关键概念...

2 个月的面试亲身经历告诉大家,如何进入 BAT 等大厂?

这篇文章主要是从项目来讲的,所以,从以下几个方面展开。怎么介绍项目?怎么介绍项目难点与亮点?你负责的模块?怎么让面试官满意?怎么介绍项目?我在刚刚开始面试的时候,也遇到了这个问题,也是我第一个思考的问...

基于SpringBoot 的CMS系统,拿去开发企业官网真香(附源码)

前言推荐这个项目是因为使用手册部署手册非常完善,项目也有开发教程视频对小白非常贴心,接私活可以直接拿去二开非常舒服开源说明系统100%开源模块化开发模式,铭飞所开发的模块都发布到了maven中央库。可...

【网络安全】关于Apache Shiro权限绕过高危漏洞的 预警通报

近日,国家信息安全漏洞共享平台(CNVD)公布了深信服终端检测平台(EDR)远程命令执行高危漏洞,攻击者利用该漏洞可远程执行系统命令,获得目标服务器的权限。一、漏洞情况ApacheShiro是一个强...

开发企业官网就用这个基于SpringBoot的CMS系统,真香

前言推荐这个项目是因为使用手册部署手册非常完善,项目也有开发教程视频对小白非常贴心,接私活可以直接拿去二开非常舒服。开源说明系统100%开源模块化开发模式,铭飞所开发的模块都发布到了maven中央库。...

这款基于SpringBoot 的CMS系统,开发企业官网确实香(附源码)

前言推荐这个项目是因为使用手册部署手册非常完善,项目也有开发教程视频对小白非常贴心,接私活可以直接拿去二开非常舒服开源说明系统100%开源模块化开发模式,铭飞所开发的模块都发布到了maven中央库。可...

【推荐】一款基于BPM和代码生成器的 AI 低代码开源平台

如果您对源码&技术感兴趣,请点赞+收藏+转发+关注,大家的支持是我分享最大的动力!!!项目介绍JeecgBoot是一款基于BPM和代码生成器的AI低代码平台,专为Java企业级Web应用而生。它采...

云安全日报200819:Apache发现重要漏洞 可窃取信息 控制系统 需要尽快升级

ApacheHTTPServer(简称Apache)是Apache软件基金会的一个开放源码的网页服务器,可以在大多数计算机操作系统中运行,由于其多平台和安全性被广泛使用,是最流行的Web服务器端软...

基于jeecgboot框架的cloud商城源码分享,兼容单体和微服务模式

3年时间里,随着关注java单商户商城系统的朋友越来越多,对cloud版本的商城呼声也越来越高。因此今年立项了cloud版本的开发,目前已发gitee开源,目前也基本测试完毕,欢迎大家体验以及提出宝贵...

SpringBoot + Mybatis + Shiro + mysql + redis智能平台源码分享

后端技术栈基于SpringBoot+Mybatis+Shiro+mysql+redis构建的智慧云智能教育平台基于数据驱动视图的理念封装element-ui,即使没有vue的使...

我敢保证,全网没有再比这更详细的Java知识点总结了,送你啊

接下来你看到的将是全网最详细的Java知识点总结,全文分为三大部分:Java基础、Java框架、Java+云数据小编将为大家仔细讲解每大部分里面的详细知识点,别眨眼,从小白到大佬、零基础到精通,你绝...

基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构(附源码)

前言zheng项目不仅仅是一个开发架构,而是努力打造一套从前端模板-基础框架-分布式架构-开源项目-持续集成-自动化部署-系统监测-无缝升级的全方位J2EE企业级开发解...

取消回复欢迎 发表评论: