►顶部微信名片可直接添加市场总监,商务咨询、方案沟通即时响应
►点击链接了解更新详情:演示体验、社群咨询、商务采购:https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo
演讲人:巫林壕,杭州奥零数据科技公司创始人、AllData开源数据中台作者。
本次技术分享全方位讲解 AllData 数据中台的12+大模块与43+核心功能,我们携手落地技术价值与产品价值,每日耕耘,顶峰相遇!与各位同行共勉!
1、大数据与大模型,重在业务落地
2、开源技术,走向成熟产业价值
3、技术组织升级,实现人和企业共同成长
4、抓住AI时代长期窗口,提前布局未来
一、打通三大数据价值链路:从资源到资产的深度跃迁
AllData数据中台帮助企业实现数据资源化→数据产品化→数据资产化三层价值升级。 从零散原始资源,经过加工治理封装成可复用的数据产品,沉淀为企业可管理、可运营的数据资产,完成数据价值的深度释放。平台整体包含 12 + 大模块,43 + 核心功能,具备完善的服务器部署规划方案。
1.1 数据资源化:
平台通过专业的数据清洗、数据标注、数据建模、算法迭代、场景应用全流程技术服务,对零散、原始、异构的多源数据进行标准化治理,将海量原始数据转化为可加工、可利用、可分析的标准化数据资源,盘活全域数据价值。
1.2 数据产品化:
平台聚焦轻量化、便捷化服务输出,打造标准化高质量数据集,搭建完善的API接口服务体系,让数据调取、数据使用、数据适配更加高效便捷,适配不同企业、不同场景的个性化数据需求。
1.3 数据资产化:
平台持续完善数据流通交易、数据资产入表全流程体系建设,规范数据交易、资产确权、价值核算流程,让无形的数据资源转化为可量化、可落地、可增值的企业数字资产,真正实现数据价值变现。
二、夯实数据底座:AI训练与产业数据供给
数据质量决定AI能力上限,数据品类决定场景覆盖广度。会议明确,AllData数据中台将持续扩大优质数据产品供给,构建多模态、全覆盖、高精度的立体化数据资源体系,全面覆盖,图片、音频、视频、文档、时序数据、具身智能训练数据六大核心数据类型。
2.1 产品全生命周期流程图
2.2 最新架构设计图
三、3大核心中台,构建完整技术闭环
AllData平台搭载数据中台、AI 中台、大模型中台三大核心中台,以数据中台为底座,搭建起一条从数据接入直到智能应用落地的全流程技术链路。
3.1 数据中台
项目地址:https://github.com/alldatacenter/alldata
正式环境:http://http://43.138.162.243:5173/ui_moat/
全流程覆盖数据入湖仓 → 数据开发 → 元数据任务 → 数据质量任务 → 数据服务API发布 → BI分析 → AI分析 → 大模型分析核心流程。
3.2 AI中台-机器学习算法平台:集成开源项目Cube-Studio
项目地址:https://github.com/tencentmusic/cube-studio
3.3 大模型中台-大模型应用开发:集成开源项目BISHENG
项目地址:https://github.com/dataelement/bisheng
3.4 大模型中台-高质量数据集平台:集成开源项目DataFlow
项目地址:https://github.com/OpenDCAI/DataFlowDataFlow
四、聚焦双赛道:深耕民生政务+赋能企业全链条发展
在政务民生领域,平台重点聚焦教育、医疗、交通、社保四大核心民生场景,通过全域数据整合与智能分析,助力政务服务精细化、公共治理高效化,推动民生服务提质增效,为城市智慧化治理提供坚实的数据与AI支撑。
在企业服务领域,平台专注打通企业生产、经营、运维全链条数据壁垒,整合产业上下游数据资源,为企业提供全流程数据赋能,助力企业实现数字化转型、精细化运营、智能化升级,降低企业数据应用成本,提升产业核心竞争力。
4.1 水利行业场景
演示从水利多源数据接入治理存储到指标计算、可视化大屏、AI 智能分析的全链路方案,解决水利数据孤岛、标准混乱难题,赋能流域智慧治水与防汛调度决策。
4.2 煤矿工业场景
演示了煤矿传感器数据通过 MQTT 协议实时采集,经 Flink 处理后写入时序数据库,实现设备状态监控与告警
4.3 汽车制造业场景
AlIData 可定义数据中台落地汽车制造业全域数智协同平台,一站式接入 ERP、MES、QMS 等多源生产数据、完成治理加工,破除车企数据孤岛,释放供应链、生产质检数据价值,赋能制造智能分析与经营决策。
五、新版本 10 大功能正式揭晓,产品能力大幅升级
5.1 物联网实时平台-集成开源项目StreamPipes
项目地址:https://github.com/apache/streampipes
支持31+种工业协议适配器接入
配置物联网实时稽查任务
进入物联网数据库查看数据结果,成功同步至物联网数据库Apache IOTDB
5.2 AI 多模态数据库-集成开源项目DG-GPT
项目地址:https://github.com/eosphoros-ai/DB-GPT
5.3 可视化数据开发-集成开源项目Nifi
项目地址:https://github.com/apache/nifi
5.4 模数共建数据源-集成开源项目Gonavi
项目地址:https://github.com/Syngnat/GoNavi
关系型数据库(5种): MySQL, Postgresql, Oracle, SQLServer, MongoDB, MariaDB
内存数据库:SQLite,DuckDB
国产数据库(8种):GoldenDB, OceanBase,Dameng,Kingbase,HighGo瀚高数据库,Vastbase海量数据库,OpenGauss高斯数据库
GaussDB 向量数据库:qdrant,milvus 消息队列数据库(半结构化5种):kafka, rabbitmq, rocketmq, redis, elasticsearch
物联网数据库:iotdb, tdengine
数据仓库(4种):Doris, StarRocks, ClickHouse, Trino
5.5 AI 计算管理平台-集成开源项目Crater
项目地址:https://github.com/raids-lab/crater
六、解析平台三大核心竞争优势
AllData 依托可插拔技术架构、全栈国产化信创适配、开源共建生态三大核心优势。 基于开源开放路线,深度兼容鲲鹏、海光等国产芯片以及瀚高、达梦、OceanBase 等国产数据库;模块化可插拔架构支持按需选配组件,轻量化部署;持续壮大开源社区生态,欢迎广大开发者参与共建。
七、央国企 & 信创国产化落地最佳实践分享
7.1 重点交付行业与应用案例
杭州奥零数据将持续聚焦教育、制造、医疗、交通、社保、水利、央国企等重点行业,输出行业预制解决方案,推进 AllData 数据中台项目落地实践,为行业客户提供私有化部署、POC 验证、定制开发、技术运维等全生命周期服务。
直播分享了 AllData 在央国企数字化转型领域落地成果与建设经验。产品经过大量政企项目实战打磨,完全适配国产化建设规范,可助力央国企稳妥完成数字化与智能化升级。未来将推出可信数据空间、隐私计算平台及数据安全合规平台,进一步拓展数据治理边界。
7.2 核心能力演示
7.3 信创国产化版本
八、未来规划
8.1 AI数据资产与治理平台
8.2 AI多模态训练数据底座
8.3 数据可用不可见,合规赋能长效发展
数据安全是数据流通与应用的核心前提。会议着重强调,AllData数据中台将严格坚守数据安全合规底线,全面落地数据可用不可见、原始数据不出域的安全运行机制。通过隐私计算、数据脱敏、权限管控、加密流通等核心技术手段,在保障数据高效共享、流通、应用的同时,严防原始数据泄露风险,实现数据价值利用与数据安全合规的双向兼顾,为政务数据、企业数据、行业数据的安全应用筑牢屏障。
8.2 平台将持续深耕多模态数据供给
平台将持续深耕AI算法研发、全场景数据赋能,依托数据与AI双轮驱动,持续助力数字经济提质增效、社会治理精准高效、实体经济转型升级,为数字中国建设注入持续动能。