网易第一个数据生产率模型,加速企业数据资产沉淀
- 时间:
- 浏览:0
9月23日,2022网易数字+会议在杭州隆重召开。网易数帆在会场发布了数据生产率模型,并以此为基础发布了大数据领域的最新成果。通过企业数知生产率的重构,帮助企业实现数据生产率的飞跃。
面对数字化时代下的机遇和挑战,网易数帆沉着应对,依托强大的技术力量和丰富的实践经验,到大数据基础、数据中台、数据治理、数据资产沉淀,审慎打磨产品和服务数字化的各个环节。帮助客户制作ldquo;每个人都使用数据,经常使用数据。发展数据文化,提高数据生产率
网易数帆大数据产品线总经理余利华
利用数据生产率模型,推进企业的质量效率化。
基于十多年的外部数字变形金刚实践,数帆可以为支持企业数据应用提供最先进、高性能的大数据技术工具和平台。会场首发ldquo;数据生产效率模型rdquo通过数字化实践经验模型,帮助企业实现数字转型目标,实现企业质量提升和效率化。
模型是利用大数据相关的技术,帮助业界的顾客沉淀数据资产,探索商务场景中的数据活用价值,长期运用于数据运用。该模型由DataOps、DataFusion和DataProduct三大核心,以及数据技术、数据资产、数据应用和数据运营四大要素组成,重点关注金融、制造、医药和流通等行业。通过从业务场景中提取数据的价值,可以进一步提高企业的数据生产率。
增强先进的大数据技术,进一步提高数据选项能力。
伴随着加速的数字化进程,企业当前大数据基础设施的发展面临着信创加速、架构解耦、云原生化、流式湖仓建设等各种挑战。为了应对数字化的潜在风险,网易数帆不断升级和优化产品功能和技术,进而改善DataOps能力。
数据Ops是数据生产力模型的三个重要内核之一,它将软件工程CI/CD方法融入到数据开发过程中。基于自动化的数据测试、任务交付等技术,构建数据交付管线,使您能够更高效地进行数据开发、更频繁地交付和更高质量的交付。
[网易]数帆在DataOps实践中发现了一系列发布审核问题。例如,任务发布时的资源泄漏、多群集、多环境任务发布难题等。
为此,网易数帆发布了新的任务发布中心,并进一步完善了网易数帆DataOps产品系统。在实际应用中,许多证券客户对数据的开发有着严格的监管要求,为了保证数据的隔离和安全性,需要一套测试,预发,生产环境等。现有平台支持多套部署,但无法高效发布任务,重复人工创建、开发、旋转等工作,成本高昂,容易出现问题。客户需要非常高效、安全的产品能力来支持这种硬工作。
任务分发中心支持集群之间的资源分发能力,支持资源的批处理导出和导入功能,允许在网络隔离方案中进行集群之间的分发。
本次会议还有一个重要的会议,《从数据中台到数据生产率mdash;mdash;网易数据建设实践》新刊首期。这也是数帆大数据团队总结经验,沉淀技术创意,希望能启发更多企业探索符合自身特色的数字化道路。
开发治理一体化,全方位沉淀企业数据资产
在数字经济时代,数据成为越来越重要的战略资源和生产要素。因此,企业在数字转型过程中开始搭建大数据相关的技术平台,但在这一过程中暴露出一些问题。例如,数据开发和数据治理的中断、不同平台缺乏统一管理、数据开发过程缺乏效率和质量兼顾、烟囱式数据开发、数据价值和成本评估不足等。
为了解决这个问题,将以往的数据治理方法编入数据开发的全生命周期,采用基于数据Ops全生命周期数据开发的数据中间站架构,通过组合作为网易的特征的基于ROI的数据资产化形成了数据治理2.0的方法论。
这个方法论的根源是ldquo。数据开发和数据治理集成rdquo;概念,也就是ldquo。设计后开发rdquo;你可以在开发的同时了解治理。其目标是将数据标准定义、指标标准定义、模型设计和数据开发系统一起,用设计驱动开发,在开发过程中保障数据标准、数据质量、数据安全落地,达到ldquo。事半功倍rdquo;有效果
网易数帆数据治理系统不仅包括传统数据治理的三个主要要素:数据质量、元数据管理、数据标准,还包括指标系统、模型设计中心、数据服务等数据中端相关系统。通过实现数据治理系统的升级,可以将数据治理过程自然地融入到数据开发的全生命周期过程中,在数据开发过程中完成数据治理系统。ldquo是通过定义指标和数据标准来实现的。规范即设计,设计即开发,开发即治理rdquo;让数据ldquo能找到,能看到,可靠rdquo;为企业提供及时、准确、复用、有价值的数据资产。
在数据治理方面,网易数帆也在奋斗。数个数据治理平台荣获2022CCF大数据与计算智能大赛ldquo;优秀事例奖rdquo获得2021-2022大数据产业优秀产品奖等多项奖项。东北证券、德邦快递等客户众多。
ldquo;未来,网易数帆将继续数据治理,钻研全链接的大数据产品和技术力量,充分激活数据生产要素的活力,将企业数据价值与业务现金化相结合,最终沉淀到企业数据资产中rdquo;帮助不同行业企业发展数字变革;余利华这样说。