干货!DataPipeline2021数据管理与创新大会全篇划重点

　　7月29日,以“万「向」更新”为主题,DataPipeline2021数据管理与创新大会在北京成功举行!中国信通院云计算与大数据研究所副所长魏凯、中信银行信息技术管理部架构管理处处长卫东、民生银行总行科技大数据管理部技术专家钟行、山东省城商行联盟核心运维组技术专家倪俊甜、中国信息协会专家范克峰、华为计算产品线openGauss数据库产品总经理胡正策与DataPipeline数见科技管理层及来自该领域的专家学者、用户代表、生态伙伴共聚一堂,共话产业机遇与挑战,共探数据管理与创新实践新模式。以期通过“万「向」汇聚,数据新生”的共识,创造行业新价值。

　　DataPipeline表示,数字化转型被按下加速键,产业升级对实时数据管理能力提出前所未有的要求,所有数据都被要求相互连接并能随时被看到、被感知、被调用。实时数据管理体系的建设既需要看透“前期实时数据平台建设、中期深化实时数据价值释放、远期实时数据驱动业务发展”大周期的视角,也需要从平台类基础设施构建出发、对“人员、流程、技术”持续精进的耐心。这种秉承长期主义的原则与DataPipeline数见科技的产品与技术发展理念不谋而合。

　　01数据要素化催生技术与管理变革

　　副标题:数据全生命周期管理与价值导向的运营管理成为发展方向

　　中国信通院云计算与大数据研究所副所长魏凯

　　随着信息经济发展,数据早已和其它要素一起融入经济价值创造过程。中国信通院云计算与大数据研究所副所长魏凯表示:当前,我们处于迎接数据生产要素崛起的新时代。在数字化转型过程中,数据作为生产要素,一方面在驱动产业智能化、催生新的生产组织形态方面的作用不断显现,推动新型产品和服务的创造;另一方面,作为参与分配的要素,数据背后涉及经济结构的变化。它对于我们数据的技术、底层基础设施等有很大的需求,所以我们管理体系、理念、方法论也有很大创新的需求。这主要体现在:

　　第一. 数据要素化需要一场技术革命:

　　组织内部从以前追求数据高效处理、追求更快更大,到今天更重视数据更加智能及良好的治理。数据不再是简单地放在数据库里就能产生价值,而是要高质量的融合起来,真正让它成为闭环里面一个不得不做的要素。在组织间,跨机构的数据以前更多是要保护,隔离,锁在保险柜里保密。今后为了做产业互联网,数据要实现上下游打通、政企打通、企业之间打通,所以其关键词变成了开放、融合,从而又有了隐私计算、区块链。我们发现,组织内及组织架构的数据流动在变化,组织的技术重心也在变化。大数据产品技术越来越丰富,应用愈加广泛,数据的一站式、全生命周期管理是我们看到的方向。

　　第二. 数据要素化也在推动管理的变革:

　　以数据治理为核心的数据资产管理体系逐步成熟,以数据运营为导向的数据资产管理体系处于萌芽。数据管理2.0数据开发运营一体化从管理本位的角度转变到服务业务的角度,数据管理工作更多为了业务的创新、为了发展,这对平台自动化、快速响应需求,多团队协作、运营驱动管理提出更高要求。该趋势下,很多企业开始做了DataOps的实践。DataOps是一种协作式数据管理的实践,致力于改善组织中数据管理者与使用者之间数据流的沟通,集成和自动化。其核心理念有:敏捷开发、治理闭环、安全可信、持续运营,这也确是数据管理的必然方向。

　　中国信息协会专家范克峰从数字化转型角度谈数据管理之变,也与以上观点相契合。在数字化转型的路径考量上,产品选型和组织方式都是重要环节。针对前者,技术实现方式千差万别,强调企业要根据自身发展情况和行业属性选择适合自己的数字化工具。针对后者,绝不可忽视“人”这一因素的重要作用,要重视管理层的支持和员工层的协作,提升企业整体数字能力。

　　中国信息协会专家范克峰

　　02 DataPipeline:聚焦数据价值释放链路中最初一公里

　　副标题:DataOps是指导DataPipeline产品和服务发展的重要原则

　　在DataPipeline创始人 & CEO陈诚看来,“聚焦最初一公里”是DataPipeline为产业提供数字化转型创新推动力的最佳注解。他指出,企业数字化转型过程中,越来越多的数据应用被构建出来、数据量大跨度增长,数据的复杂度越来越高,无论从需求侧还是供给侧看,数据的时效性要求都变得越来越强。和直接给客户提供价值的场景应用 “最后一公里”相比,数据融合这“最初一公里”的重要性也愈发凸显,并且具备丰富内涵。

　　DataPipeline创始人 & CEO陈诚

　　在优化数据科学和运营团队之间协作的大量数据管理实践中,DataPipeline逐步发现DataOps是跨越业务与技术、数据与场景、规模与质量等数据驱动商业变革鸿沟的有效路径。DataOps强调了对数据流向价值流转变的数据旅程管理的理念,也是指导DataPipeline产品和服务发展的重要原则,其中最重要的三点:

　　第一. 拥抱变化。技术场景的快速分化产生大量不同类的存储和计算引擎、信创大势下优秀国产数据库涌现、业务导向下数据结构等的快速迭代、网络等的环境变化,以上多方面的变化使得数据调度及流转变成极其重要的能力。“最初一公里”成为筑牢数据管理根基的关键,也是DataPipeline选择该领域的初心。

　　第二. 组织协作。数据管理中的角色多样,数据科学家、数据分析师、数据工程师、大数据平台运维人员、DBA等,各类角色及其承载内容变化量大、速度快,日常工作中缺少抓手协作配合。DataPipeline通过产品的四层抽象——系统资源管理、节点管理、链路管理和数据任务管理来帮助组织,给每一类角色提供相应的入口与易用可视化强的界面,从而形成清晰的工作边界与良好的配合。

　　第三. 自动敏捷。该原则的底层逻辑即低代码、无代码胜过开发,各类策略的配制胜过代码调整。DataPipeline在每一个抽象层级上提供了几十种策略的配制。细致程度可以达到写入组件的冲突,数据结构发生变化,有没有错误队列。客户在应对新变化时,周期可以从以月计改为按小时甚至分钟去计算,效率提升显著。以上都源自DataPipeline过去5年对客户场景抽丝剥茧地分析与理解,及技术功能上的细分。

　　03以用户为中心,专注场景实践 创造行业新价值

　　副标题:在对于安全、稳定、性能都有着极高标准的金融行业扎根

　　DataPipeline坚持以用户为中心,找到业务场景与实时数据管理技术的结合点,以场景化的创新解决方案实践,加速行业数字化和智慧升级。

共3页: 上一页下一页

>相关《干货!DataPipeline2021数据管理与创新大会全篇划重点》内容：

理财鱼小提示：干货！2021年中国新式茶饮行业龙头企业市场竞争格局分析 美西西VS奈雪的茶 新式茶饮行业主要上市公司： 目前国内新式茶饮行业的上市公司主要有奈雪的茶(02150.HK)。 本文核心数据： 美西西和奈雪的茶门店数量及覆盖城市、美西西和奈雪的茶会员数量...【继续阅读】

2021年来，市场热点轮动加快，结构性行情明显，权益市场来年将如何发展？主动权益基金可能会有哪些调仓趋势？疫情与国际环境变化的影响下，债券市场与固收领域又将变化？“债牛”会否重启？债券市场是否能保持稳增长态势？中国基金报独家打造高端访谈类节...【继续阅读】

理财鱼小提示：疫情将致全球经济缩水5%、通胀不会妨碍政策宽松，这场会议干货满满！ 中新经纬12月22日电 12月20日，第十届领航中国年度盛典暨2021金融界智能金融国际论坛开幕，近百位专家学者、2000多家金融机构和上市公司出席。 2021年即将走向终点，全球经济仍...【继续阅读】