每一天便利超市：把核心业务系统的承载，交给托管云

西安每一天便利超市连锁有限公司(简称“每一天便利超市”)是西安知名的综合性零售型企业,成立于2010年,现拥有超2000家门店。在发展过程中,公司积极推动信息化与数字化建设,涵盖移动支付、电子会员卡、在线购物及送货服务等,致力于成为持续创新的数字化企业。

每一天便利超市正加速其数字化转型步伐,运用BI系统(商业智能BI分析系统)全方位构建精细化运营、数字化营销、数字化服务等数字化经营能力。但面临原有BI分析系统性能瓶颈、系统过保且缺乏专业支持、日常报表处理效率低下、难以满足业务时效要求等问题,为进一步优化企业信息流通,提升生产效率与决策效率,并有效控制成本与风险,公司决定使用深信服托管云替换现有IT基础设施,承载核心BI分析系统。

一、每一天便利超市BI建设现状及IT困境

(一)BI当前架构

每一天便利超市全面推进企业数字化转型变革,运用数字化技术,全方位构建精细化运营、数字化营销、数字化服务等数字化经营能力,建立具有持续创新能力的自进化型的数字化企业,为顾客持续创造价值,优化顾客体验。公司当前企业信息化系统已建立完善包含ERP、OA、财务等,各业务系统数据较为分散,为提高便利店的营收和降低企业生产成本,公司于18年引入BI系统,以优化数据集成与分析能力,提升生产效率与管理水平。通过BI系统的部署,集团期望能够实现数据的集中管理和分析,增强决策支持,进一步推进整体数字化转型进程。

如图所示,该架构为每一天便利超市初始建设的BI系统,IT基础资源采用IDC托管服务器和某国外品牌超融合形式承载。

(二)BI当前IT资源

如图所示,用户原先采用的国外品牌超融合承载,单台虚拟机配置为78核CPU,145GB内存,总磁盘存储空间为1700GB。

(三)现有IT架构面临的挑战

1.门店数量持续增加,现有BI承载方案面临挑战,BI系统已过保,缺乏专业的运维人员

公司门店数量超2000家,采供销经营等需要分析的数据有1.1TB,随着业务后续发展,迫切需要一套能够根据实时需求动态调整资源分配的解决方案,以保障数据处理的高效性和准确性。

2.BI本地超融合承载服务器磁盘采用SATA盘,性能不足,出报表时间较长,严重影响营销决策工作

日增数据10GB,原有BI系统性能不足,每日报表任务执行时间过长,无法满足业务分析的时效性要求。

3.资源扩展有限,业务上线慢

本地机房托管导致资源灵活扩展性不高,没有购买多余机柜空间,业务扩展从采购服务器、租赁机柜空间到上线交付周期长,无法满足BI业务快速扩容需求。

4.原先国外品牌超融合面临续费价格昂贵,需要更加经济的IT承载方案

二、托管云解决方案

1.网络方案

远程运维:本地运维人员与托管云机房采用IPSec VPN加密互联,保障运维安全。

带宽:采用云上200M带宽,可根据业务所需流量值弹性扩容。

2.云资源选型

专属服务器:CPU:Intel 6342 @ 2.80GHz 24核*2路,内存:256.00 GB,磁盘:3.2TB NVMe SSD硬盘;高性能服务器配置满足用户对磁盘IO和计算资源的需求。

弹性基础设施资源:托管云提供A/T3+级机房,用户无需购买机柜空间,仅购买专属服务器、带宽等云服务即可;基础资源由托管云管家运维并交付上线,用户只负责应用部署上线,满足用户快速扩容和业务上线需求。

3.服务方案

提供贴心服务。托管云配备专属管家、专属群、专属项目经理,减轻用户运维压力,用户可以更好地聚焦业务应用开发与创新。

三、托管云测试记录

(一)标准配置测试结论

首先根据现有BI服务器配置(现有BI系统虚拟机配置为78核145GB,使用某国外品牌超融合承载),使用与之配置相似的标准托管云服务器进行测试,获取系统基线性能需求和特征,测试内容如下:

1.测试服务器配置:CPU:Intel 622R @ 2.90GHz 16核,磁盘混闪:SATA盘

2.测试场景:根据出报表的数据类型进行并发计算任务测试

测试时间:计算每个数据类型产出报表时长

测试结果:根据每次测试的计算任务总用时,得出平均计算任务跑完用时790分钟左右说明磁盘性能有瓶颈导致查询数据较慢,计算过程CPU iowait:35%左右。

3.测试场景:根据并发用户数测试CPU资源瓶颈

测试并发用户数:7

测试结果:并发用户为7,同时打开报表,用户反馈打开报表缓慢,各资源负载如下图CPU各核心负载偏高,磁盘、内存、网络均正常,说明计算资源没有得到充分利用或计算CPU核数不足。

根据用户提出的性能不足以及测试结果,得出影响BI系统的三个核心指标如下:

多核CPU高主频:BI系统通常需要多核CPU以支持并行处理任务,例如数据提取、转换和加载(ETL)、实时查询处理以及复杂的分析算法。高主频:更高的CPU主频意味着更快的单线程性能,这对于执行密集型的分析任务比较重要。

高性能存储:为了加速数据访问及分析速度,通常会采用固态硬盘(SSD)而非传统机械硬盘(HDD),尤其是在需要频繁读写操作的情况下。

大内存需求:BI系统在运行时需要加载大量数据到内存中进行处理,因此对内存的要求较高。足够的内存可以减少数据加载的时间,提高系统的响应速度和数据处理能力。

基于测试结果进行云上资源选型和架构设计如下:

(二)托管云架构设计、选型、调优

1.云架构设计

根据前期测试结果及总结结论,在规划新的云上承载平台时,考虑到BI系统的性能需要提升,以及资源独享和安全性等因素,因此在托管云平台上云服务器采用一台专属计算服务器承载BI,两台托管私有云承载其他业务系统。考虑到BI需要高主频CPU、高IO存储性能,因此采用硬件环境:CPU:Intel 6342 @ 2.80GHz 24核*2路,内存:256.00 GB,磁盘:3.2TB NVMe SSD硬盘,机房选择就近机房接入,具体如下:

(1)选择在陕西深信服托管云T3+机房,建设3节点专属私有云。其中BI系统独占1节点计算资源,使用NVMe全闪卷。

(2)通过IPSec VPN与本地网络环境组网打通,实现托管云与本地进行安全可靠的内网访问。

(3)网络采用多运营商网络,解决跨网访问延迟问题。