互联网浪潮下,新电商、游戏等企业迎来了新一轮市场竞争,如何更好地利用手中的数据,为现有客户提供“更贴身”的服务、洞察新业务、拓展新市场,成为绝大多数电商企业持续思考的问题。
此外,在面对构建数字化能力所需要的ICT基础设施和服务这一问题时,企业往往也面临着是自己投入高研发成本,还是选择市场领先的产品的两难选择。
梦饷集团也曾面临这样的问题。作为新电商基础设施提供者,梦饷旗下拥有饷店、爱库存、爱豆学堂等业务,触达数亿消费者。“随着业务的飞速增长,我们的云消耗量每年都增长2到3倍。为了支撑公司未来两年营收与用户数成倍增长的目标,通过单元化实现可水平伸缩的弹性架构,满足我们多样化、个性化的去中心化商业模式需求,优化IT运维成本 ,我们非常需要一个更契合公司未来发展战略的‘云 ’合作伙伴,来为我们提供中立安全可靠的云服务。”梦饷集团CEO冷静说。
华为云云原生数据湖支撑梦饷集团的飞速发展
基于优化公司业务的需求,梦饷集团选择了华为云作为新的云服务供应商,为其提供大数据存储和计算服务的迁移,并提供后续服务。梦饷集团数智中心副总经理吴树海表示:“华为云从产品、实施、运维分别给我们以强大的信心和支持,详细来说就是:强大的产品力和快速的产品迭代,为项目成功提供底层支撑;极致的实施服务团队,为项目按时、保质量地推进上线保驾护航;全面的运维体系,保障了切换以后系统的稳定运行。“
华为云云原生数据湖通过 “云原生技术+AI驱动的全场景”组合拳,使能数据,洞察多元业务创新,为企业提供全场景解决方案,优化资源使用效率,实现降本增效。
华为云云原生数据湖“云原生技术+AI驱动的全场景解决方案”架构图
为帮助商家和店主搭建网络平台,梦饷集团通过华为云云原生数据湖全托管Serverless架构,实现业务应用敏捷开发,容器化与秒级扩容,解决了以往面临的创新业务落地慢、传统上云安装部署周期长、灵活性差的问题,助力梦饷集团快速开创多样化商业模式。
面对业务飞速增长带来的海量用户访问与业务数据,华为云云原生数据湖采用“存算分离”模式对存储集群和计算集群分别云化,存储资源统一使用对象存储服务OBS,计算资源可以按照业务需要使用DLI、DWS、ModelArts、CSS、 GES等服务,既解决了存储与计算绑定造成的资源利用率不均的问题,又使得大数据计算节点能够按业务峰谷灵活调配,弹性调用。“存算分离”的技术方案让数据自由流动,实现一份数据支持多种业务场景,提高系统的资源利用率。
为支撑电商公司梦饷集团的经营分析、精细化拓客、风控、创新业务洞察等应用场景,
华为云云原生数据湖使用数据湖探索DLI + 融合数据仓库DWS作为基础数据处理层支持离线、实时、交互式场景,并无缝对接上层AI引擎,实现智能推荐与搜索,释放数据价值,驱动梦饷集团全场景业务的数字化与智能化升级。
经营分析场景
为向电商公司提供数据驱动的重要运营指标参考、支撑日常报表、提供客户PC数据罗盘和移动罗盘等功能,华为云云原生数据湖使用Serverless数据湖服务DLI融合数据仓库DWS,结合AI根据业务场景构建的算法模型,通过批处理引擎Spark和流处理引擎Flink,对订单、用户访问、商品等全域业务数据进行快速、智能处理和分析,从而实现对GMV等经营指标走势的实时展示,为分析师、高管等决策分析提供强有力的数据支撑。
精细化拓客场景
累计帮助品牌商家销售近 4亿 件商品的梦饷集团,希望通过洞察消费动机、消费行为和消费态度为数亿消费者提供更贴合用户需求的个性推荐,提升用户体验,提升转化率。
为实现个性化推荐,华为云云原生数据湖基于ModelArts AI开发平台,提供了海量数据预处理、自动化模型生成等能力,对海量用户访问、交易、商品等数据进行深度挖掘分析,创建洞察消费者群体的360度洞察画像,针对每位用户进行实时个性化推荐,提高商品成交量。同时在越来越普遍的图搜场景中,华为云云原生数据湖采用CSS向量引擎,提供更低时延的图搜索服务,并且提升了15%的搜索精度。
风控场景
为避免恶意用户注册、恶意刷单等行为对店铺信用等级、用户信息安全带来的严重影响和威胁。华为云云原生数据湖使用图引擎服务GES,以“用户”-“商户”间关联关系为边构建了风险网络,不但能够对单节点风险进行捕捉,还能够评估高风险异常行为对其它关联节点的不良影响,将查询所得的异常行为配合惩罚系统,对恶意用户注册、恶意刷单等进行监控及实时处理。与传统关系型数据库及ES相比,图引擎加速了风险的研判,更加有利于风险抑制与应急响应。
创新业务洞察场景
未来,面向梦饷集团出海业务布局,华为云云原生数据湖将结合在AI领域的沉淀,诸如图引擎,VR、实时翻译能力,打破时空限制,助力梦饷集团拓展发展空间,实现面向消费者的全新购物体验,激发创新基因,更好地推动新电商发展。
以上所有的业务,统一使用了华为云云原生数据湖进行数据开发 + 调度,同时通过DGC的数据资产(元数据采集、血缘分析等),快速构建了企业内部的全局数据资产地图。
华为云云原生数据湖组件
在梦饷集团CTO钟浩看来,华为云云原生数据湖提供了领先的产品与服务,他表示:“华为云包含容器、数据库、AI、大数据的云原生方案,不仅能帮助我们弹性地应对流量洪峰,大大的节省了使用成本。同时,云原生还降低了架构的复杂性,它的敏捷性、高效性,能够让我们的更好的聚焦和实现业务创新。”
目前,华为云云原生数据湖已成功赋能电商、社交、游戏、金融、保险、物流、零售、政府等多行业,通过成熟的全生命周期数据治理能力,将AI与行业知识深度融合,实现业务智能,释放企业数据价值,为管理决策、业务创新提供科学数据支持,助力企业业务智能升级。