来源(公众号):大数据AI智能圈 数据就像流淌在企业血管中的血液,它的每一次流动、每一次转化都留下独特的印记。 作为数据工程师,我曾困惑于复杂的数据链路,直到遇见数据血缘分析这个"数据世界的GPS"。它不仅帮我找到数据流转的每个关键节点,更让我看清数据治理的全新格局。 今天,想和大家分享这个强大工具背后的故事,看看它如何在数据的迷雾中开辟一条清晰的航道。 从混沌到有序的数据治理之路 当数据成为企业的生命线,我们遇到一个棘手的问题 - 数据来自哪里?去向何方?它是如何变化的?企业里的每一条数据都像一个基因序列,携带着独特的"遗传密码"。解读这些密码,追踪数据的来龙去脉,就是数据血缘分析的精髓所在。让我创建一个架构图来展示数据血缘的本质特征: 数据血缘分析就像给每条数据装上GPS定位器,不仅记录它的"出生地",还能实时追踪它的"行踪"。在企业数据资产日益庞大的今天,这种追踪能力变得尤为重要。数据血缘分析系统在实际应用中有着独特的价值: 数据血缘分析是企业数据治理的关键武器。一个优秀的数据血缘分析系统能帮助企业快速定位数据问题,预测数据变更影响,评估数据资产价值。它像企业数据世界的"基因图谱",记录着数据的演变历程,指导着数据的未来发展。要构建这样的系统,我们需要先理解数据血缘的四大核心组成:元数据(数据的DNA序列)、主数据(数据的基因库)、业务数据(数据的表现型)、指标数据(数据的性状特征)这些组成部分相互关联,构成了完整的数据血缘体系。 数据血缘的建设方法和实践路径 建设数据血缘系统就像建造一座现代化的智慧城市,需要从地基到顶层有序规划。 这座"数据城市"分为五层: 1、采集层负责数据收集 2、处理层进行数据加工 3、存储层保管数据资产 4、接口层提供数据服务 5、应用层创造数据价值。 让我们再深入看看数据血缘建设的具体实践路径: 企业在实施数据血缘分析时,面临三种建设路径选择:开源系统、厂商平台、自主建设。选择哪种方式取决于企业的实际情况:技术能力、资金预算、建设周期等核心要素。开源方案适合技术能力强的团队,可以深度定制,成本相对较低,适合特殊场景需求。厂商平台则提供成熟解决方案,能快速落地,但费用较高,定制能力有限。自主建设则完全掌控主动权,可以根据业务需求灵活调整,适合长期规划。 数据血缘建设核心在于建立数据资产全景图,打通数据孤岛。它不仅是技术工具,更是数据治理思维的升级。通过数据血缘,企业能更好地理解数据资产,提升数据质量,实现数据价值最大化。在数字化转型的浪潮中,数据血缘分析正成为企业数据治理的标配。它就像企业数据世界的"导航系统",指引着数据资产的有序流动,推动着数据价值的持续释放... 数据血缘的实践场景和未来趋势 数据血缘分析在各行业已开花结果。 金融机构利用它追踪交易链路,确保合规性;制造企业通过它溯源产品质量;医疗机构借助它串联病历数据;零售商用它构建精准用户画像。 让我们展望数据血缘的未来发展趋势: AI技术将深度赋能数据血缘分析,自动发现数据关联,预测数据变化。实时血缘追踪将成为标配,支持数据变更的即时响应。跨组织的数据协同共享将突破壁垒,构建更广阔的数据生态。打造卓越的数据血缘体系需要注意以下关键点: 明确建设目标,避免贪大求全。从最急需的业务场景出发,逐步扩展。重视数据标准,建立统一的数据规范。血缘分析的前提是数据的规范化管理。平衡技术与业务,技术服务于业务需求。过于复杂的技术方案往往难以落地。持续运营维护,保持系统的时效性。数据血缘不是一次性工程,需要持续投入。 1、明确建设目标,避免贪大求全。从最急需的业务场景出发,逐步扩展。 2、重视数据标准,建立统一的数据规范。血缘分析的前提是数据的规范化管理。 3、平衡技术与业务,技术服务于业务需求。过于复杂的技术方案往往难以落地。 4、持续运营维护,保持系统的时效性。数据血缘不是一次性工程,需要持续投入。 数据血缘分析正在改变企业的数据治理方式。它不仅是技术创新,更是管理思维的革新。精准掌握数据血缘,就掌握了数字时代的制胜密码。 未来,数据血缘将与云计算、大数据、人工智能等技术深度融合,催生更多创新应用。企业应未雨绸缪,构建自己的数据血缘能力,在数字化转型的浪潮中占得先机。数据血缘分析已成为数据治理的必修课,好比一张智能地图,指引企业在数据的海洋中找到前进的方向。掌握数据血缘,就掌握了数据治理的未来。
破局数据要素市场化 攻克数字建设难题 3月5日,国务院总理李强在政府工作报告中指出,今年要加快完善数据基础制度,深化数据资源开发利用,促进和规范数据跨境流动。 今年是“十四五”规划的收官之年,也是进一步全面深化改革的重要一年,更是数据工作“改革攻坚年”。在此重要节点,如何持续推进数据要素市场化配置改革,强化对数字中国、数字经济、数字社会规划建设的统筹,不断完善政策制度与体制机制,重点攻克数据要素市场化、价值化进程中的难点、堵点、痛点,成为亟待解决的核心问题。 释放数据价值的关键突破口 随着数字经济时代的到来,数据已成为新型生产要素。公共数据资源作为要素投入生产,对经济、政治、文化、社会和生态文明建设等具有巨大价值。麦肯锡公司预测,数据流动量每增加10%,将带动GDP增长0.2%。 用“数智化”等先进技术改造提升传统产业成为我国老工业基地黑龙江省近年来发展新质生产力的重要路径。图为在哈尔滨汽轮机厂有限责任公司叶片分厂,中小叶片智能生产线上的机械臂在安装卡紧汽轮机叶片。新华社 “今年,数据价值将会实现真正的大爆发。”全国政协委员,全国工商联副主席、奇安信集团董事长齐向东对本报记者表示,大模型推动人工智能高速发展,这是数据价值变现的重要途径之一。人工智能大模型相当于“倍增器”和“发动机”,把数据“灌”进去,就会产生出动力。 3月1日,国家公共数据资源登记平台正式上线运行,凡是已经授权、计划授权运营的公共数据资源产品,需要到该平台上进行登记。这标志着数据要素市场化配置改革迈出重要一步。 面对公共数据在早期市场化中存在“流不动、供不出、用不好”的问题,国家信息中心大数据发展部数据要素处处长王璟璇告诉本报记者,在助力传统产业数字化转型方面,要鼓励更多党政机关、公共服务机构通过共享、开放、授权运营方式对外供给产业发展所需的公共数据。国家公共数据资源登记平台上线后,全社会都可以了解、查询哪些公共数据对外进行了开发利用以及形成了哪些公共数据产品和服务,未来用数单位还可以提交申请用数需求,促进供需对接。 中国通信标准化协会发布的《数据要素白皮书(2024年)》显示,截至2024年7月,我国已有243个省级和城市的地方政府上线数据开放平台,各地平台上开放的有效数据集达370320个,与2023年下半年相比,新增17个地方平台,平台总数增长约8%。 数据价值化,要在场景应用中得以实现。公共数据是数据要素市场化改革的“试验田”和“加速器”,其开发利用不仅为市场提供基础资源,还通过场景创新带动全要素流通。 山东青岛真情巴士集团打造的充电精益化数据产品“青益充”,实现了公交车辆运营数据、国家电网波峰波谷时段数据等公共数据与“特来电实时充电状态数据”等九类数据深度融合,预计每年可节约充电成本970余万元;福建省依托省市两级公共数据汇聚共享平台,接入全省2000余个政务信息系统、汇聚1800多亿条有效数据,目前平台日均批量交换数据1.5亿多条,有效支撑各地各部门800多个应用场景。 目前,我国数据产业呈现出储量大、增长快、多元化、应用广的发展特征,以政务、金融、互联网、交通电力为代表的行业持续深化数据要素的发展与应用。艾瑞咨询预计2024年全年市场规模将达1662亿元,2025年市场规模将有望达2042.9亿元。 在促进产业协同中实现放大、叠加、倍增效应 数据要素市场化配置改革要解决让数据“供得出”“流得动”“用得好”“保安全”,需要构建良好的供数、用数生态,实现数据要素在促进产业协同中的放大、叠加、倍增效应。而构建良好供数、用数生态,推动数据要素市场化配置改革,对于进一步深化企业数字化转型、挖掘数据要素在产业协同中潜力,具有极为关键的意义。 目前,我国企业数字化转型程度持续加深,但仍有较大发展空间。相关数据显示,98.8%的中小企业已经开始数字化转型,但62.6%的中小企业仍处于数字化转型早期阶段。实际上,数据的价值不能孤立存在,需要在与各类业务的深度融合中得到彰显,要以赋能实体经济为提点,不断拓展数据应用场景。 在大连华锐重工集团股份有限公司智能化实验室,孙元华(左)和同事操作大连港数字化矿石码头系统(2025年2月20日摄)。新华社记者 杨青 摄 “制造业是立国之本、强国之基,大力推动数字经济和实体经济深度融合势在必行。”全国人大代表、伊利集团全球创新中心科学研究总监王彩云对本报记者表示,企业在推动数实融合的过程中会产生大量数据,要实现高质量发展,关键是打通数据从“有”到“用”的过程。比如在消费端,伊利推动“全域、全场景、全生命周期”的消费者数字化运营,搭建覆盖400多个数据源的大数据雷达,开发了与1.5亿消费者在线协同共创新品的智能洞察系统,平均用3.5天就可以完成市场洞察,不断打造满足消费者多元需求的健康产品。 上下联动、横向协同 数据要素市场化配置改革是一项庞大的系统性工程。随着国家数据局和各级数据管理机构的揭牌运行,我国上下联动、横向协同的数据工作体系基本形成。数据基础制度加速释放,一批围绕数据产权、流通交易、收益分配、协同治理等方面的制度正在构建。 2025年2月26日,在位于织里镇的湖州今童王制衣有限公司数字化车间,工人在流水线上加工服装。该公司是集产品研发、设计、生产供应链管理、市场营销为一体的综合性儿童服装企业,年产销量达200万件(套)。新华社记者 徐昱 摄 据统计,截至目前,国家数据局已发布20余份数据要素领域相关政策文件,激活供数动力,释放用数活力。未来,还将围绕企业数据开发利用等出台新政策文件。 此外,工信部、财政部等多部门围绕数据流通交易、数据安全与治理、产业融合等出台了多项政策,持续推动数据要素市场化。 随着数据要素市场日益壮大,数据资产化探索步伐显著提速,企业数据资产入表成为业界关注的热点方向。从2024年1月1日起,财政部制定印发的《企业数据资源相关会计处理暂行规定》(以下简称《规定》)正式施行。这意味着数据要素从会计报表上开始显性化,过去被企业费用化处理的数据资产在资产负债表内有了表达。 “《规定》发布以来,各类经营主体均在积极探索数据资源入表机制,激活数据要素市场发展内生动力。”针对数据资源入表存在的问题,全国政协委员,上海市政协副主席、致公党上海市委主委邵志清表示,目前各类经营主体均在积极探索数据资源入表机制,激活数据要素市场发展内生动力。但仍存在数据资源的合规与确权难度大,对软件、系统和数据资源的异同理解尚未达成一致认识,数据资源的预期经济利益分析论证挑战大,数据资源的后续支出处理尚未达成一致认识,数据资源审计面临挑战等问题。他认为,应加强法律法规建设,细化权属证明流程,出台统一的数据资源审计指南和标准,从而引导企业对数据资源进行更有效的治理。 面对全球数字化竞争的加剧、国内经济高质量发展的迫切需求,数据要素市场化配置工作被赋予了更为重大的使命。对于“十五五”时期数据要素市场化配置如何激活数字动能这一问题,王璟璇认为应注重以下四个方面: 一是加快建立数据产权归属认定制度。传统要素如土地、资本等形成的成熟要素市场,均具备两个特性:要素权属明晰,在流通中增值。当前国家应加快出台数据产权制度,从长期看,建议推进数据产权立法工作。 二是推进全国一体化数据市场建设。全国一体化数据市场是数据要素市场化配置改革的发展目标。应着力构建场内场外相结合、多层次的数据流通交易体系,健全各方收益分配和利益保护制度,建设纵横联通的国家数据基础设施,促进数据要素合规高效流通交易。 三是着力增强全社会数据资源创新应用能力。提高各方治数、用数能力,激发更多数据创新应用场景,培育更多新业态、新模式、新技术,让数据要素的价值被更广泛认可。 四是加强数据要素、数字经济领域国际合作。我国是第一个将数据列为生产要素的国家,我国在数据要素市场化配置改革中积累的经验可以更多分享给海外,为全球数据资源共享开发提供中国经验、中国方案。 (中国发展改革报社前方记者 杜壮) 新质生产力发展需要注重三个关键词 3月5日,国务院总理李强作政府工作报告。透过政府工作报告,可以看到,“因地制宜发展新质生产力,加快建设现代化产业体系”依然是今年政府工作十大任务之一。 笔者从今年的政府工作报告及与代表委员面对面交流中发现,推动新质生产力发展,有三个关键词值得关注。 一是产业集聚。地区产业高质量发展不是“独角戏”,而是“大合唱”。作为现代产业发展的重要组织形式,产业集群是区域经济竞争力的集中体现。 谈到今年工作目标时,政府工作报告中出现了“深入推进战略性新兴产业融合集群发展”“先进制造业和现代服务业融合发展试点”“加快国家高新区创新发展”“打造具有国际竞争力的数字产业集群”“增强国际和区域科技创新中心辐射带动能力”等表述,都不约而同地指向了产业集群建设。 在产业集群创新的当下,多位代表委员都在关注两大问题,一是如何集聚更多的创新资源、高效利用创新要素,二是如何增强供应链的弹性和韧性。目前多地都在积极寻找破解之策,一些集群以龙头企业为创新源,一些通过发挥产业基础或要素禀赋突出优势,还有的通过融合创新实现进一步转型升级。今年政府工作报告对“集群”的关注既表明了加快培育的决心,又提出了重点发展方向。因此,在发挥产业集聚效应过程中,各地要注意在自身产业发展基础上,进一步提高产业关联性和市场融通性。 二是技术突破。让更多的技术实现从“0”到“1”的突破至从“1”到“100”的拓展。从芯片制程的不断精进,到量子计算的崭露头角,技术的每一次突破都打破了既有边界,重塑着行业新格局。在推进高水平科技自立自强上,政府工作报告不仅提到了“做什么”,也提到了“怎么做”。新质生产力所强调的关键核心技术攻关和前沿性、颠覆性技术研发依然是技术发展重点,而在政策落实上,需要人才培养、国家战略科技力量布局、科技经费分配和管理、市场服务、政策性金融等方面的支持。实际上,只有持续推动技术创新突破,我们才能在激烈的国际竞争中抢占先机,实现经济高质量发展,为社会进步与民生改善提供不竭动力源泉。 三是产业应用。推动先进技术从“图纸”登上“生产线”。每年政府工作报告中的“新词”备受关注,今年更是出现了多个“新面孔”,比如具身智能、6G、人工智能手机和电脑、智能机器人。这些产业从应用推广上体现出一些共同点,即具有高度智能、数据驱动、跨领域融合、生产生活效率提升,以及发展前景广阔、市场潜力大等特点。 产业应用的主体是企业。政府工作报告提出,对于新兴产业和未来产业,要“梯度培育创新型企业,促进“专精特新”中小企业发展壮大,支持独角兽企业、瞪羚企业发展,让更多企业在新领域新赛道跑出加速度”;对于传统产业转型升级,要“培育一批既懂行业又懂数字化的服务商”。唯有企业勇立潮头,新质生产力才能在产业落地中释放巨大能量。 以“新”提“质”,以“质”催“新”。在“十四五”规划的收官之年,新质生产力培育让高质量发展成色更足,也将为开启新征程筑牢坚实根基。 (中国发展改革报社评论员 杜壮) 来源(公众号):国家数据、中国经济导报
3月5日上午9时,十四届全国人大三次会议在人民大会堂开幕,国务院总理李强作政府工作报告(以下简称“报告”)。《报告》中明确了这些“数据元素”。 2024年工作回顾 加快数字中国建设,数字经济核心产业增加值占国内生产总值比重达到10%左右。 2024年政府工作任务 1、大力提振消费、提高投资效益,全方位扩大国内需求。 创新和丰富消费场景,加快数字、绿色、智能等新型消费发展。 2、因地制宜发展新质生产力,加快建设现代化产业体系。 培育壮大新兴产业、未来产业。深入推进战略性新兴产业融合集群发展。开展新技术新产品新场景大规模应用示范行动,推动商业航天、低空经济等新兴产业安全健康发展。 建立未来产业投入增长机制,培育生物制造、量子科技、具身智能、6G等未来产业。梯度培育创新型企业,促进专精特新中小企业发展壮大,支持独角兽企业、瞪羚企业发展让更多企业在新领域新赛道跑出加速度。 3、加快制造业数字化转型。 培育一批既懂行业又懂数字化的服务商,加大对中小企业数字化转型的支持。 4、激发数字经济创新活力。 持续推进“人工智能+”行动,将数字技术与制造优势、市场优势更好结合起来,支持大模型广泛应用,大力发展智能网联新能源汽车、人工智能手机和电脑、智能机器人等新一代智能终端以及智能制造装备。 扩大5G规模化应用,加快工业互联网创新发展,优化全国算力资源布局,打造具有国际竞争力的数字产业集群。加快完善数据基础制度,深化数据资源开发利用,促进和规范数据跨境流动。促进平台经济规范健康发展,更好发挥其在促创新、扩消费、稳就业等方面的积极作用。 5、推动标志性改革举措加快落地,更好发挥经济体制改革牵引作用。 完善科技金融、绿色金融、普惠金融养老金融、数字金融标准体系和基础制度。 6、扩大高水平对外开放,积极稳外贸稳外资。 培育绿色贸易、数字贸易等新增长点,支持有条件的地方发展新型离岸贸易。 7、深化多双边和区域经济合作。 持续扩大面向全球的高标准自由贸易区网络,推动签署中国一东盟自贸区3.0版升级协定,积极推动加入《数字经济伙伴关系协定》和《全面与进步跨太平洋伙伴关系协定》进程。 8、推进新型城镇化和区域协调发展进一步优化发展空间格局。 发展数字化、智能化基础设施,完善无障碍适老化配套设施,提升 综合服务功能,打造宜居、韧性、智慧城市。 9、加快数字政府建设。 健全“高效办成一件事”重点事项清单管理和常态化推进机制,完善覆盖全国的一体化在线政务服务平台。 来源:国家数据局
在数字化转型的浪潮中 数据中心运维管理面临巨大挑战。 如何确保系统运行稳定? 如何快速响应问题概况? 康桥数据中台监控中心全新升级 提供全天候、全任务集成监控 助力运维效率再上新台阶! 一、中心总览 1 全局视角,掌控平台运行状态 无论是资源组、主机、数据库,还是各类任务的执行情况,都能通过中心总览一目了然。 通过图形化展示,实时呈现数据治理模块的状态变化,助你快速定位问题、优化资源配置。 二、各模块监控 1 精准定位,高效运维 主机监控:实时监控主机的CPU使用率、剩余内存、剩余磁盘、TCP连接数等关键指标。 数据库监控:对接入中台的数据库的连接数定义监控指标,出现异常情况能够及时预警。 各任务监控:对数据归集任务、数据清洗任务、数据开发任务、数据共享任务等进行统一管理,支持设定监控指标以及监控预警方式。 三、智能预警 1 从监控到处理,全流程闭环 康桥数据中台的监控中心通过智能化预警机制,实现了从监控-->预警-->处理的全流程闭环。 当任务指标超出预设阈值时,系统会自动预警并通知相关责任人,支持微信、短信、邮件等多种预警方式,确保问题在萌芽状态就被及时解决。 更多升级,敬请期待
在数字化浪潮的推动下,电子政务作为提升政府行政效率和公共服务能力的重要手段,正日益受到广泛关注。随着电子政务的不断深入,政务数据的积累量也在迅速增长。然而,数据的快速积累也带来了诸多挑战,尤其是数据质量问题,成为制约电子政务进一步发展的瓶颈。这不仅影响了政府决策的准确性和效率,也可能对公共服务产生负面影响。因此,如何有效提升政务数据质量,成为当前亟待解决的问题。 一、政务数据质量管理的重要性与现状 政务数据的质量管理是确保电子政务系统稳定运行和高效服务的基础。高质量的数据能够为政府决策提供准确依据,优化资源配置,提升公共服务质量。反之,低质量的数据则可能导致决策失误,影响政府公信力,甚至造成资源浪费和损失。尽管我国政务数据质量管理已取得一定成效,但实际操作中仍面临诸多挑战。数据来源复杂、质检工具不标准、人员素质参差不齐等问题,使得政务数据质量管理工作困难重重。此外,随着数据量的持续增长,传统质检方式已难以满足需求,急需自动化、智能化的质检工具来提高质检效率。 二、政务数据质量管理的新挑战 当前,政务数据质量管理面临着多重挑战。一方面,数据来源的多样性和复杂性要求质检规则能够更加灵活、智能地适应不同情况;另一方面,政务数据的敏感性和重要性也对质检工具的安全性和可靠性提出了更高要求。同时,随着电子政务的不断发展,政务数据质量管理还需要建立起长效机制,以持续监测和改进数据质量。 三、破局之道:“AI+准度领航” 面对政务数据质量管理的新挑战,国脉互联提出“AI+准度领航”数据质控合规系统,以“构筑质量屏障,守护合规标准”为目标,建立持续、系统的数据质量检测机制,实现从数据精准定位到数据质量治理的全流程精细化管控,确保数据的准确性、完整性、一致性、规范性、时效性和可靠性,全面强化数据合规管理,确保数据合法合规使用。通过“AI+准度领航”,我们可以实现对数据的智能化摸底、精准制定规则、高效质检与评估,以及建立长效机制。 1.智能化摸底 “AI+准度领航”拥有强大的数据处理能力,能够全面梳理来自各类源头的数据。它可以有效地对数据进行分类,帮助我们清晰地识别出哪些数据尚未经过质检,哪些数据已经过质检但质量未达到预期,以及哪些数据属于高质量数据。这种智能化的摸底过程,为后续的数据质检工作奠定了坚实的基础,使质检工作能够更加精准地针对存在的问题展开。 2.精准制定规则 结合国家数据管理相关标准及行业特定要求,“AI+准度领航”为不同的数据集量身定制质量标准。它充分利用AI大模型和深度学习技术,深入剖析数据特性,从而制定出既符合统一标准又满足本地实际需求的检测规则,确保数据质量的准确性与可靠性。 3.高效质检与评估 “AI+准度领航”具备强大的自动化质检能力。它能够根据制定的检测规则对相关数据进行自动化质检,快速识别问题数据并自动生成详细的评估报告。这提高了质检效率,还为各部门提供了明确的改进方向。 4.建立长效机制 “AI+准度领航”不仅关注当前的质检需求,还着眼于未来的可持续发展。它具备实时动态检测的能力,能够同步生成实时检测报告,快速识别并处理任何潜在的数据问题。通过设置预警机制和定期审查调整检测规则,“AI+准度领航”助力政务数据质量管理实现持续优化和提升。 四、“AI+准度领航”的价值 “AI+准度领航”以其独特的设计思路和预期效果,与当前政务数据质量管理的需求高度契合。它不但能够解决数据来源复杂、质检规则不灵活等问题,还能够提高质检效率、降低人为错误、增强数据安全性。通过“AI+准度领航”的智能化摸底功能,政府部门能够全面评估各类数据的质量,准确区分出质检质量不高的数据,从而为后续的数据质检工作提供明确的方向和重点。 这种精准的质检模式,有助于政府部门及时发现并修正数据中的问题,确保数据的准确性和可靠性。同时,“AI+准度领航”还能为政府部门提供科学、高效的决策支持,助力电子政务的健康发展。通过持续监测数据质量,政府部门可以更加及时地调整政策、优化服务,从而提高公共服务的质量和效率。 五、结论 综上所述,面对政务数据质量管理的新挑战,“AI+准度领航”以其独特的设计思路和预期效果,为电子政务的健康发展提供了新的可能性。我们期待着这款工具能够尽快落地应用,为政府部门带来更加精准、高效的数据质量管理体验。同时,我们也相信,在未来技术的不断进步和应用的深入下,“AI+准度领航”将在政务数据质量管理领域发挥更加重要的作用。 来源(公众号):国脉研究院
文 | 中国科学院大学经济与管理学院教授 孙毅 建立健全合规高效的数据流通体系是推进数据要素市场化的必然要求,也是推动数据要素以较低的交易成本实现跨主体流通、多场景复用,在更大范围内与其他要素协同、与不同种类数据融合,促进数据要素价值化过程、放大数据要素价值化效应的重要举措。 近日,国家发展改革委、国家数据局等部门联合印发《关于完善数据流通安全治理 更好促进数据要素市场化价值化的实施方案》(以下简称《方案》),针对数据流通安全治理中存在的标准不明、责任不清、制度不健全等突出问题,制定了科学规范、务实可行的政策举措,以期有效降低数据流通环节的安全治理成本,以成本最小化实现安全最优化,营造鼓励创新、包容创新、让企业轻装上阵的数据产业发展环境,培育充满活力、充满信心、充满韧性的市场主体,开创以良法善治统筹发展和安全、平衡活力和秩序的数据要素市场化价值化新局面。 《方案》不新增数据安全责任义务,不新设数据安全治理条款,旨在细化现行法律法规的原则性要求,打消市场主体顾虑,降低市场主体负担。在《网络安全法》《数据安全法》《个人信息保护法》《关键信息基础设施安全保护条例》《网络数据安全管理条例》(以下简称“三法两条例”)的总体框架下,《方案》聚焦数据流通环节的痛点堵点问题,将“三法两条例”的原则性要求细化为数据流通中的具体举措,坚持以促进数据要素流通使用作为安全治理的出发点和落脚点,通过总结安全可信、行之有效、具有共识的安全治理实践经验,健全数据流通安全治理体系,提升数据流通安全治理的稳定性和可预期性,实现高质量发展和高水平安全良性互动。例如,依照《个人信息保护法》规定,在广告投放、精准推荐、用户画像等业务场景中,企业在跨平台交互、开发个人数据时,需要对个人信息进行匿名化处理,以保障个人权益、保护个人隐私。 业界普遍反映,由于个人信息匿名化处理缺乏认定标准,企业在开展相关业务时普遍存在安全合规顾虑,数据安全治理投入因标准缺失导致负担过重。事实上,关于匿名化的标准问题,业界存在一些具有共识、验证可行的做法,如传递非永久性设备标识符、使用联邦学习和隐私计算技术进行联合数据开发、采用聚合数据进行群体统计分析等。针对这些现实问题和迫切需求,《方案》针对个人数据流通保障,在《个人信息保护法》的原则要求下,提出了制定个人信息匿名化相关标准规范,明确匿名化操作规范、技术指标和流通环境要求,以及鼓励采用国家网络身份认证公共服务等多种方式,强化个人信息保护。这些政策举措将为个人数据流通安全治理提供标准和依据,有效打消市场主体安全合规顾虑,减轻安全治理投入负担。 《方案》不搞叠床架屋,不求面面俱到,旨在找出“真问题”、提出“实举措”,强化问题导向,突出可操作性,力求务实管用。针对企业数据、公共数据和个人数据在流通环节中的场景化问题,《方案》立足行业需求、总结行业经验,提炼出针对性举措。 例如,政务数据共享过程涉及多元主体,各参与主体的责任边界缺少清晰界定,出现安全问题时“责任不随数据流通而流转”,政府部门作为政务数据供给源头单位往往承担兜底责任,从而导致政务数据“不愿共享”“不敢共享”。相关政府部门普遍反映希望能够明确政务数据共享的权利责任边界,从而更好地促进政务数据流通使用。 针对上述问题,《方案》依照《政务信息资源共享管理暂行办法》,在政务数据提供方“谁主管、谁提供、谁负责”和政务数据接收方“谁经手、谁使用、谁管理、谁负责”的原则基础上,明确提出要区分数据提供前和数据接收后的安全管理责任。 特别是针对政务数据提供方,要求在数据提供前明确政务数据共享范围、用途、条件,探索建立数据接收方数据安全管理风险评估制度,保障政务数据提供方在履行好事前安全管理责任的前提下不再承担兜底责任。上述举措将建立健全政务数据流通安全合规责任划分机制,有效减轻政务数据共享的安全合规负担,从而提升政务数据共享水平,促进政务数据价值释放。 贯彻落实《方案》的关键在于降低数据流通安全治理成本。 一是要逐步制定完善数据流通安全合规细则与标准,降低制度性交易成本。要加强调研征集新场景、新问题和新诉求,总结提炼有需求、有共识、有效果的经验做法,不断完善数据流通安全治理体系,提升数据流通安全治理的针对性和可操作性,降低因政策要求不明确、不具体、不落地带来制度性交易成本。 二是要加大数据安全治理技术和产品服务研发支持,降低数据流通安全治理的创新成本。加大可信数据空间、区块链、隐私保护计算、匿名化等技术研发和应用推广支持力度,完善引导企业加大技术创新投入的机制,培育一批面向数据流通安全治理的技术创新型企业,壮大数据流通安全治理服务规模,推动数据流通安全应用产品创新,全面提升数据流通安全治理领域企业创新能力。 三是要积极探索数据流通安全治理的创新模式,降低数据流通安全治理的运营成本。采取差异化监管措施,在保障安全的前提下降低数据流通安全治理的行政负担;探索建立数据流通安全保险机制,利用市场化手段合理分散企业风险成本;鼓励各级政府、大型企业面向中小型企业提供有助于提升企业风控能力、降低企业安全成本的数据流通安全治理服务,推动具备条件的部门和地区建立中小企业数据流通安全补贴制度,降低中小企业参与数据流通的合规成本。 四是加强《方案》的政策宣贯,降低数据流通治理的协调沟通成本。强化《方案》出台背景、原则、目标等方面的解读和宣贯,凝聚各方共识、稳定市场预期,避免因理解不深入、认知不统一、配合不到位带来的沟通协调成本,群策群力建立健全数据流通安全治理体系,更好促进数据要素市场化价值化。 来源(公众号):北京数据
近日(3月1日),国家公共数据资源登记平台(https://sjdj.nda.gov.cn)正式上线运行,登记工作全面展开,这标志着数据要素市场化配置改革迈出重要一步。同期,山西、江苏、浙江、安徽、福建、江西、湖北等7个省级平台同步上线,并与国家平台实现互联互通。 开展公共数据资源登记,是贯彻落实《中共中央办公厅、国务院办公厅关于加快公共数据资源开发利用的意见》的重要举措。国家发展改革委、国家数据局联合印发《公共数据资源登记管理暂行办法》《公共数据资源授权运营实施规范》《关于建立公共数据资源授权运营价格形成机制的通知》后,国家信息中心积极搭建技术平台,地方、部门和相关企事业单位主动对接落实资源登记工作,为平台如期上线创造了条件,也为逐步形成公共数据资源全国“一本账”,促进供需对接和公共数据规范化、透明化应用奠定基础。 公共数据资源登记平台是开展登记工作的信息化载体,实行“一个标准、两级架构”。 近日上线的国家公共数据资源登记平台,主要负责办理中央和国家机关及其直属机构、中央企业的登记业务,同时暂时代为受理部分未完成平台建设省份的登记申请。 登记首日,国家登记平台已有医保、气象、自然资源等多类国家级公共数据上线,北京、天津、河北、内蒙古、辽宁、上海、广东、海南、四川、陕西、宁夏、新疆生产建设兵团等地依托国家平台开展了登记工作。 此外,山西、江苏、浙江、安徽、福建、江西、湖北等7个省级平台在3月1日同步上线运行,并与国家平台实现互联互通。 国家登记平台与省级登记平台依托国家电子政务外网实现统一赋码、互联互通,将逐步构建起职责明确、分工负责、运转有序的全国公共数据资源登记体系。据国家数据局介绍,该平台不仅是一个数据资源管理系统,更是全社会获取数据、发现资源的重要窗口。国家数据局相关负责人表示,未来将持续优化平台功能,提升登记服务质量,更好地满足用数主体的多元化用数需求,加快释放公共数据资源价值。 国家公共数据资源登记平台 地址为:https://sjdj.nda.gov.cn 平台显示,目前进行公共数据资源登记的流程大致有5步,登记申请--登记受理--登记审查--登记公示--确认单发放。 Q:什么情况下需要登记数据资源? A:直接持有或管理公共数据资源的党政机关和事业单位,应对纳入授权运营范围的公共数据资源进行登记,鼓励对未纳入授权运营范围的公共数据资源进行登记。 Q:什么是登记主体? A:登记主体,是指根据工作职责直接持有或管理公共数据资源的单位,以及依法依规对授权范围的公共数据资源进行开发运营的法人组织。 Q:什么是登记机构? A:登记机构,是指由国家和地方数据管理部门设立或指定的、提供公共数据资源登记服务的事业单位。 Q:首次登记需要哪些材料? A:首次登记时,登记主体应按规定提交主体信息、数据合法合规性来源、数据资源情况、存证情况、产品和服务信息、应用场景信息、数据安全风险评估等申请材料。 Q:登记结果的有效期是多长时间? A:登记结果有效期原则上为三年,自赋码之日起计算。对授权运营范围内的公共数据产品和服务登记,根据授权协议运营期限不超过三年的,登记结果有效期以实际运营期限为准。 早在2月18日国家数据局新闻发布会上,国家数据局副局长陈荣辉就对国家公共数据资源登记平台进行了介绍。陈荣辉介绍,在登记平台建设方面,全国登记平台体系建设按照“一个标准,两级平台”的思路开展。国家数据局制订统一的登记技术和业务标准,负责建设国家登记平台,确保与各省级平台对接,实现登记信息互联互通和统一赋码。各省级数据管理部门牵头建设省级登记平台。陈荣辉表示,登记平台上线运行后,将发挥两个方面的作用:一个是服务性功能,供数单位可以通过登记平台发布数据资源和产品信息,用数单位可以来这里查找数据资源,未来还可以发布数据需求,从而更好地实现供需对接,为降低全社会用数成本、促进数据资源价值释放创造条件。一个是管理功能,通过登记工作,掌握全国公共数据资源底帐,加强授权运营信息披露,促进授权运营规范化、透明化。 来源:数据要素社整理自国家数据局官网、国家公共数据登记平台、央视新闻客户端、AI战略数字转型
公共数据是我国数据要素供给体系的重要组成部分,具有公共性、权威性与规模性,蕴藏巨大价值。各地区各部门在坚持数据开放的基础上,有序探索公共数据授权运营,对于赋能政务服务、公共治理具有重要意义,是培育数据要素市场的关键突破口。公共数据授权运营过程中,随着参与主体、数据及授权运营模式的不断拓展,如何构建公共数据安全治理格局,促进公共数据开发利用成为重要内容。 近日,国家发展改革委、国家数据局等部门联合印发了《关于完善数据流通安全治理 更好促进数据要素市场化价值化的实施方案》(以下简称《方案》),对促进数据要素安全合规流通利用提出重要意见。其中,针对公共数据流通过程的安全管理,明确了数据提供方、数据接收方、公共数据授权运营机构三方数据主体角色的数据安全保护责任和管理要求,细化了公共数据开发利用过程中的安全要求。 01强化源头安全治理,提升公共数据安全成效和供数水平 《方案》指出“数据提供方按照‘谁主管、谁提供、谁负责’的原则,明确政务数据共享范围、用途、条件,承担数据提供前的安全管理责任,探索建立数据接收方数据安全管理风险评估制度,确保数据在安全前提下有序共享。”公共数据涵盖的数据范围广泛,涉及国家安全、公共利益。各级党政机关、企事业单位等政务、公共数据来源机构作为数据提供方,应承担数据提供前的安全管理责任,在数据供给源头强化公共数据主动治理,在供给环节保障所供出公共数据的合法性、安全性、可用性、准确性和时效性。 02贯穿供出后全过程安全管理,确保公共数据在各接收主体间安全流转 《方案》指出“数据接收方按照‘谁经手、谁使用、谁管理、谁负责’的原则,承担数据接收后的安全管理责任。”公共数据持有者、使用者作为数据流转过程中的数据接收方,要承担数据接收后的安全管理责任。一是确保公共数据接收后的存储安全,建立安全的数据存储环境,包括物理环境、网络环境等,确保重要数据在存储过程中的安全性。二是确保公共数据使用与加工安全,公共数据接收方应按照协议或规定中明确的数据使用范围和用途来合规使用公共数据。采取必要的安全措施,如数据加密、访问控制、数据脱敏等对重要数据进行加工处理,以防止重要数据泄露或被非法访问。三是数据销毁末端安全,数据接收方应根据数据的生命周期和业务需求,制定数据销毁计划,明确数据销毁的时间、方式和范围,考虑数据的敏感程度和重要性,选择可靠的数据销毁方法,确保数据在销毁后无法被恢复。 03 探索公共数据授权运营安全合规制度化路径 《方案》指出“有关地方和部门开展公共数据授权运营的,应依据有关要求明确公共数据授权运营机构的安全管理责任,建立健全数据安全管理制度,采取必要安全措施,加强关联风险识别和管控,保护公共数据安全。”公共数据授权运营被认为是构建数据要素市场的关键突破口,也是繁荣数据要素市场的重要支撑,如何把控好这一环节安全合规,备受市场关注。公共数据授权运营安全治理是一个“制度化”过程,授权运营机构应建立健全数据安全管理制度,加强数据全生命周期的安全防护。一是明确授权运营机构在经营与信用、专业资质与人才、技术安全、应用场景与数据使用等多个方面的数据安全保护条件和能力。二是加强数据产品和服务的安全合规管理,通过建立分类分级、访问控制、监测预警等安全管理制度,在保障国家秘密、国家安全、社会公共利益、商业秘密、个人隐私和数据安全的前提下,依法依规在授权范围内开展公共数据授权运营活动,充分释放公共数据价值。三是基于数据全生命周期安全防护理念,持续完善态势感知和监测预警体系建设,切实提升公共数据授权运营过程中的安全风险监测和应急处置能力。 (来源:国家数据局微信公众号;作者:周民 国家信息中心副主任;罗海宁 国家信息中心外网办安全管理处处长)
来源(公众号):大数据AI智能圈 深夜,小王焦急地盯着实时数据大屏。618大促正酣,一个重点直播间的流量却突然跳崖式下跌。 通过数据分析,他迅速发现流失用户多为年轻女性,立即调整选品策略。几分钟后,人气回升,销量暴增。 这不是科幻片场景,而是当下企业数字化转型的真实写照。从电商大促到银行运营,从汽车营销到知识付费,数据已悄然改变企业决策方式。 企业数字化转型该如何破局?数据中台真的是终极答案吗?让我们一起揭秘数据飞轮的神奇力量。 升级企业数字化基因 数据已成为企业数字化转型的核心武器。 在阿里的数据中台、腾讯的智慧零售引领下,各行各业都在积极寻求数据赋能业务的新途径。让我们一起走进抖音电商的618大促现场。 "这个直播间流量怎么突然断崖式下跌了?"运营主管小王盯着实时数据看板,眉头紧锁。通过火山引擎的实时画像分析,他很快发现了问题所在 - 流失用户多为年轻女性,当前直播间选品与她们的兴趣不匹配。 几分钟后,高性价比化妆品提前上架。人气回升,购买量激增。这正是数据驱动业务决策的生动案例。 数据中台曾被视为数字化转型的终极答案。 企业投入重金建设数据基础设施,打通数据孤岛,沉淀数据资产。但现实是,许多企业的数据中台建了,决策依然靠拍脑袋。 数据建设不是终点,数据消费才是关键。 轻颜相机团队发现用户反馈最多的问题是"不知道怎样摆姿势"。他们迅速上线了"灵感"功能提供拍照指导。 通过火山引擎的数据分析,他们发现80%用户不会主动探索这个功能,大部分新用户查看后就收起了。找到原因后,团队快速优化了功能入口和使用链路,最终显著提升了功能渗透率。 这种数据驱动的工作方式不是偶然。在字节跳动,从产品功能到用户界面的每个细节都依赖数据验证。连"两个视频之间的缝隙有多宽"这样的小事,都要做几百组A/B测试。 数据消费已融入企业DNA,推动业务持续进化。这就是数据飞轮的力量。 某企面临一个棘手问题:登录率。 作为资讯类产品,强制登录会流失用户,不登录又难以提供个性化服务。产品团队通过火山引擎增长分析工具进行归因分析,设计方案并反复A/B测试验证。最终登录率追平今日头条和西瓜视频,互动率和人均活跃天数持续上涨。 这不是简单的技术优化,而是数据飞轮转动的典型过程: 数据分析发现问题→验证解决方案→业务增长→产生新数据→持续优化提升。每一次转动都在积累经验,提升能力。 某行将A/B测试推广到信用卡运营、App平台运营等14个业务平台。某汽车行通过接入火山引擎,实现公域平台数据打通,构建以用户为中心的统一数据体系。知识付费平台得到在引入A/B测试工具后,"遇事不决就A/B"成为内部共识。仅2022年第三季度就开展超过20个实验场景,成功率达80%。数据消费已融入团队基因。 好用的数据产品是撬动数据消费的杠杆。 火山引擎发布数智平台VeDI,覆盖数据引擎、数据建设与管理、数据应用等全链路协同。升级湖仓一体分析服务LAS,Serverless流式计算Flink服务,让数据处理更高效便捷。 数据飞轮不只是一个概念,而是企业数字化转型的实践指南:以数据消费为起点,通过"产品工具+方案+咨询"推动飞轮转动,让数据真正赋能业务。 随着市场环境变幻莫测,企业内部架构日益复杂,传统的数据中台模式已难以应对挑战。数据飞轮开创了一条新路:将数据驱动深入业务血脉,培养团队数据思维,让企业在数字化浪潮中破浪前行。 这是一场升级企业数字化基因的革命。未来已来,看数据飞轮如何转动。
今年全国数据工作的一个重要方向,是大力推进数据要素的市场化价值化。如何推动公共数据资源开发利用、更好发挥数据要素作用?怎样打造更多数据应用场景?国家数据局2月18日举行“数据价值化,我们在行动”系列新闻发布会第一场,国家数据局等有关部门负责人介绍了相关情况。 推进政务数据共享应用 “推动数据价值化,公共数据要先行一步,真正把公共数据资源供出来、用起来。”国家数据局副局长陈荣辉说。 去年10月,《中共中央办公厅 国务院办公厅关于加快公共数据资源开发利用的意见》公开印发。据介绍,全国数据系统在配套制度建设、政务数据共享、数据授权运营、应用创新实践等方面开展一系列工作,有些方面取得初步进展。在推进政务数据共享应用方面,明确数据治理和共享责任,推动“一次填报,多方共用”,推动数据由“向基层要”变为“从系统取”,切实减轻基层干部重复报数负担。同时推动数据回流,支持基层干部利用数据更好为企业和百姓服务,助力提升基层治理水平。 以福建为例,2020年,福建入选国家公共数据资源开发利用8个试点省份之一。该省依托省市两级公共数据汇聚共享平台,接入全省2000余个政务信息系统、汇聚1800多亿条有效数据,基本实现全省政务信息系统“应接尽接”和全省公共数据“应汇尽汇”。并以汇聚共享平台为枢纽,常态化开展公共数据共享申请、授权、对接、应用,目前平台日均批量交换数据1.5亿多条,有效支撑各地各部门800多个应用场景。 探索公共数据授权运营 探索公共数据授权运营,这是近来数据领域的热词,如何理解? 陈荣辉表示,授权运营是一种新的数据供给方式,目的是通过引入专业化力量,对公共数据进行治理、加工,形成数据产品和服务,在保障安全的前提下更好满足社会用数需求、更好促进数字经济发展。目前,很多部委都在按政策文件要求,梳理拟授权运营的数据资源,编制数据授权运营方案,积极推进数据资源和产品登记工作。 据介绍,国家公共数据资源登记平台将于3月1日正式上线试运行。“这个平台不仅是公共数据资源的管理系统,也是信息披露和资源发现的窗口,全社会都可以来这里找数据、找产品。”陈荣辉说。根据会上发布的信息,直接持有或管理公共数据资源的党政机关和事业单位,应对纳入授权运营的公共数据资源进行登记。未纳入授权运营范围的数据资源,以及利用被授权数据资源加工形成的数据产品和服务,也鼓励进行登记。 陈荣辉介绍,登记平台上线运行后,将发挥两个方面的作用:一是服务性功能,供数单位可以通过登记平台发布数据资源和产品信息,用数单位可以来这里查找数据资源,未来还可以发布数据需求,从而更好地实现供需对接,为降低全社会用数成本、促进数据资源价值释放创造条件。二是管理功能,通过登记工作,掌握全国公共数据资源底账,加强授权运营信息披露,促进授权运营规范化、透明化。 打造更多数据应用场景 数据价值化,要在场景应用中得以实现。 例如,气象数据与经济社会千行百业息息相关,应用场景广阔、发展潜力巨大。深圳市围绕低空物流企业需求,为起降点及航线提供1公里分辨率,分钟级更新的大风、降水等精细化服务,减少因恶劣天气导致的延误或损失,让配送计划更合理、经济。上海基于气象数据决策开展无人机消减雾试验,能见度可从500米快速提升至2公里以上,为降低大雾天气对飞行“窗口期”影响提供了支持。 中国气象局预报司副司长张洪政介绍,中国气象局还积极对接新能源规划选址、高效消纳和安全运行对精细化气象数据的需求,引导鼓励各方加入示范场景共建,创新新能源气象服务产品和解决方案,为国家能源绿色低碳转型、能源安全提供支撑。 各地区各部门对发挥数据要素作用都高度重视,比如,今年福建省政府工作报告提出,深化“千行百业”行动,聚焦重点领域,培育更多数字应用场景。重庆市提出要扩大数据流通和价值示范,培育实数融合新业态。国家数据局会同相关地方和部门重点打造一批示范性数据应用场景,探索形成可复制、可推广模式。 陈荣辉表示,下一步,将加快推动公共数据资源管理和运营机制改革落地见效,进一步增强数据资源价值释放的驱动力,以公共数据开发利用引领撬动各方数据的融合应用,打造数据利用的多应用场景和模式,更好释放数据要素价值。 来源:人民日报