大数跨境

AI时代,这些传统数据技术思维该升级了!

AI时代,这些传统数据技术思维该升级了! 商业智能研究
2026-11-10
5
导读:只有让数据真正做到可集成、可理解、可治理、可信用,才能让AI从技术能力走向实际业务价值。
很多团队做AI项目,模型接上了、应用搭起来了,
真正推进时却发现卡点不在算法,而在沿用多年的数据技术思维:

还是先建仓再清洗、先定报表再消费,还是批处理为主、T+1出数,还是以表为中心、等人来找数。

可AI要的是可发现、可理解、可实时消费的数据,Agent不会等你开完口径对齐会。


那么,AI时代,传统的数据技术思维究竟需要升级哪些方面?
下面从六个方面展开。

在数据底座建设方面,FineDataLink 5.0 可以通过多源数据连接、全量与增量同步、CDC和ETL加工,帮助企业打通不同业务系统,建立统一的数据集成与加工链路,为后续的数据分析和AI应用提供基础。

需要自取:
https://s.fanruan.com/ns1l9




一、数据集成:从数据搬运转向数据服务

传统数据集成,主要解决的是数据能不能打通的问题。

ERP中的订单数据、CRM中的客户数据、MES中的生产数据、WMS中的库存数据,通过数据同步和ETL加工汇集到数据仓库,再提供给BI报表使用。


但AI应用需要的数据往往更加复杂。
某产品未来一个月是否存在库存短缺风险?
回答这个问题,不能只查询当前库存数量,还需要关联销售订单、生产计划、采购在途、物料BOM和安全库存等信息。

AI需要的不是孤立的数据表,而是能够围绕业务问题组织起来的数据。
数据集成的建设思路也需要随之改变:
  • 多源数据打通: 将ERP、CRM、MES、WMS等系统的数据连接起来,形成完整的数据链路。
  • 业务数据关联: 建立客户、产品、订单、物料等业务对象之间的关联关系。
  • 数据加工处理: 通过清洗、转换、计算和关联,将原始数据加工成可以直接使用的数据。
  • 数据持续更新: 根据业务时效要求,建立批量、增量和实时数据同步机制。

在这一过程中,FineDataLink 5.0 可以连接不同类型的数据源,通过可视化ETL数据流完成字段映射、数据清洗、表关联和计算,将分散在不同系统中的数据加工成统一的数据结构。


数据集成不能停留在把数据搬到一起,而要让不同来源的数据能够围绕业务场景协同使用。



二、数据建模:从面向报表转向面向业务语义

数据建模的出发点,也不能再局限于报表需要什么数据,就设计什么表。
销售分析需要销售事实表,库存分析需要库存快照表,财务分析需要收入、成本和费用等主题数据。这种方式能够支撑固定指标和标准化报表。


但AI的使用方式更加灵活。

业务人员可能提出:
  • 哪些客户的回款风险正在上升?
  • 哪些产品的库存周转效率明显下降?
  • 哪些生产订单可能影响交付?
  • 某个区域销售增长,但利润为什么没有同步增长?
这些问题往往需要跨主题、跨指标、跨业务过程分析。

单纯按照报表需求设计数据表,就容易出现一个问题:数据虽然存在,但AI并不知道这些数据之间有什么业务关系。

因此,数据建模需要进一步加强业务语义建设。

1.明确业务对象


客户、产品、订单、供应商、物料、生产工单等,都需要建立清晰的业务定义和关联关系。

2. 统一指标口径


  • 销售额究竟是订单金额还是确认收入?
  • 库存金额采用什么计价方式?
  • 订单交付率按照什么时间计算?
这些规则需要形成统一定义。

3. 建立数据关系


不仅要知道订单表和客户表存在,还要明确订单如何关联客户、订单明细如何关联产品,以及订单与回款之间是什么关系。

4. 补充业务上下文


除了字段和指标,还需要维护业务说明、统计范围、时间口径、数据来源和适用场景。


这类信息能够帮助AI理解数据的真实含义,而不是仅仅根据字段名称推测业务逻辑。
数仓建模不仅要满足报表计算,还要让数据具备清晰的业务含义和可解释的关联关系。



三、数据处理:从批量加工转向批流协同

批量ETL曾是数据平台最常见的处理方式,按照固定周期采集业务数据、完成加工,再生成经营分析报表。
对于财务月报、历史趋势和周期性经营分析,这种方式完全可以满足需求。

但AI应用对数据时效性的要求正在提高。
销售人员希望AI查询最新订单状态,仓储人员希望AI掌握当前库存变化,生产管理人员希望AI及时发现设备异常和生产进度偏差。

数据更新不及时,AI就可能基于过期信息作出判断。
数据处理需要从单一批量加工,升级为根据业务场景选择批处理、增量处理和实时处理。


常见方式包括:

  • 批处理: 适合历史数据统计、财务结算、周期性经营分析。
  • 增量处理: 只处理新增或发生变化的数据,减少重复计算。
  • CDC实时采集: 捕获数据库中的新增、修改和删除事件,满足高时效场景的需求。
  • 实时计算: 对持续进入的数据进行处理,支持实时监控和异常识别。

FineDataLink 5.0 支持全量、增量和CDC等数据同步方式,可以根据不同数据源和业务时效要求配置采集任务。对于订单状态、库存变化等需要及时更新的数据,可以通过CDC捕获源端变化;对于财务汇总、历史分析等场景,则可以采用定时采集和批量加工。


并不是所有数据都必须实时化。 历史经营分析没有必要全部采用实时处理,库存变化、订单状态等高时效场景则需要更及时的数据更新机制。
真正需要升级的是数据处理策略,而不是一味追求实时。



四、数据治理:从人工管理转向AI可理解、可追溯

数据治理的评价标准,也需要随着AI应用发生变化。
除了数据标准是否统一、质量规则是否完善、元数据是否完整,还要考虑数据能否被AI准确理解,分析结果能否追溯到数据来源和加工过程。


因为AI非常依赖数据质量和业务定义。
假设某个销售指标存在口径错误,传统BI报表可能只是显示一个错误数字;AI却可能进一步根据这个数字分析销售趋势、判断经营问题,甚至生成错误的管理建议。

错误数据经过AI加工,并不会自动变成正确结论。
数据治理需要进一步加强以下几个方面:

1.数据标准更加明确


统一字段命名、业务术语、指标定义和编码规则,避免AI将相同业务概念识别为不同对象。

2. 数据质量贯穿加工全过程


针对数据完整性、准确性、一致性、唯一性和及时性建立质量规则,而不是等到报表出现问题后再检查。

3. 数据血缘能够追溯


当AI给出异常分析结果时,需要能够追踪相关数据来自哪个系统、经过哪些加工任务、使用了什么计算规则。

4. 数据资产便于发现和理解


通过元数据、数据字典和数据目录,明确数据的业务含义、数据来源、责任部门和使用场景。
在数据治理落地过程中,FineDataLink 5.0 可以通过数据质量检测配置校验规则,并结合任务调度、运行监控和异常告警,及时发现数据处理问题。同时,其血缘分析功能可以辅助追踪数据表与开发任务之间的加工关系,帮助排查数据异常和分析上下游影响范围。


过去,数据治理更多是为了让数据管理规范、使用可靠;现在还需要考虑AI能否准确理解这些数据,以及分析结论能否找到对应的数据依据。
AI时代的数据治理,不只是保证数据能够正常使用,还要让数据的来源、含义、质量和处理过程能够被理解和验证。



五、数据安全:从系统权限转向AI全链路管控

传统数据安全主要围绕数据库、业务系统和BI应用进行权限管理、敏感数据脱敏和访问控制,确保不同岗位只能查看授权范围内的数据。
但AI加入之后,数据的使用路径发生了变化。

过去,用户通过报表查看数据;现在,用户可以通过AI对话提出问题,由AI自动查询数据库、调用API、检索知识库,甚至执行业务操作。
这也带来了新的安全风险:

  • 普通销售人员查询客户回款,AI是否可能读取其他区域的客户信息?
  • 员工要求AI分析工资数据,是否有权访问薪酬信息?
  • AI生成的分析结果,是否可能泄露受到权限限制的敏感字段?

安全管理不能只停留在数据源和BI报表层面,还需要覆盖AI调用数据的全过程。


主要包括:

  • 身份认证: 明确是谁在使用AI,以及对应的用户身份。
  • 数据权限: 按照岗位、部门和业务范围控制数据访问。
  • 敏感信息保护: 对个人信息、财务信息和商业机密进行分类分级及脱敏处理。
  • 调用过程审计: 记录数据查询、工具调用和关键操作。
  • 接口安全: 对AI调用数据的接口进行身份认证、访问控制和流量管理。

在这一过程中,FineDataLink 5.0 可以通过数据服务功能,将企业经过加工和治理的数据发布为标准化的数据API,并结合鉴权、黑白名单、限流和熔断等机制控制接口调用。


AI能够访问数据,不代表AI可以访问所有数据。安全边界必须先于智能应用建立。



六、数据应用:从BI报表转向AI驱动的智能分析

过去的数据应用,主要以BI看板、固定报表和自助分析为主。
管理者通过看板了解销售、利润、库存和生产情况,发现异常后再安排人员分析原因。这种方式能够解决经营数据可视化的问题,但仍然需要使用者具备一定的数据分析能力。

AI正在改变这一过程。
管理者可以直接向AI提问:
本月销售额下降的主要原因是什么?
AI可以根据授权的数据,查询销售趋势、客户结构、产品表现和区域变化,进一步拆解影响因素。

在此基础上,还可以继续追问:
  • 哪些客户贡献了主要降幅?
  • 哪些产品的销售变化最明显?
  • 下一步应该采取什么措施?

这意味着数据应用正在从固定报表展示,向自然语言交互、智能分析和业务辅助决策发展。


未来的数据应用可以分为三个层次:

第一层:数据查询。


通过自然语言查询业务指标,减少人工编写SQL和反复查找报表的工作。

第二层:智能分析。


结合业务指标、历史趋势和多维数据,自动识别异常、分析变化原因,并给出相应的分析依据。

第三层:业务协同。


AI通过受控的API和业务工具调用能力,进一步完成信息查询、任务创建、流程发起等操作。
BI负责可视化分析,数仓负责数据组织和计算,AI则进一步降低数据使用门槛,提升分析和业务协同效率。
BI不会因为AI出现而失去价值,数仓也不会被AI取代。三者将形成更加紧密的协同关系。



结语

AI时代,数据技术不仅没有失去价值,反而成为AI应用落地的重要基础。
从数据集成、数据建模到数据治理和安全管理,传统数据技术的核心能力依然重要,但建设思路需要升级。

  • 数据集成: 从数据搬运转向业务数据服务。
  • 数据建模: 从面向报表转向面向业务语义。
  • 数据处理: 从单一批量转向批流协同。
  • 数据治理: 从人工管理转向可理解、可追溯。
  • 数据安全: 从系统权限转向AI全链路管控。
  • 数据应用: 从固定报表转向智能分析与业务协同。

AI的能力取决于模型,也取决于数据基础。 
只有让数据真正做到可集成、可理解、可治理、可信用,才能让AI从技术能力走向实际业务价值。


图片


点击【阅读原文】,体验文中同款数据集成工具


图片

【声明】内容源于网络
0
0
商业智能研究
帆软旗下机构「帆软数据应用研究院」 专注于企业数据化应用、大数据BI技术和理论观点研究,向业界输出前沿的研究与洞察,帮助企业把握商业智能趋势,提升管理与商业战略认知,让数据成为生产力。
内容 1157
粉丝 0
商业智能研究 帆软旗下机构「帆软数据应用研究院」 专注于企业数据化应用、大数据BI技术和理论观点研究,向业界输出前沿的研究与洞察,帮助企业把握商业智能趋势,提升管理与商业战略认知,让数据成为生产力。
总阅读22.5k
粉丝0
内容1.2k