释放数据潜能，驱动智能未来：Data+AI能力全新升级

释放数据潜能，驱动智能未来DATA+AI能力全新升级主讲人：Bridge Huang高质量数据是AI差异化的关键01构建 AI-Ready的数据智能平台02共创，共赢，共成功03高质量数据是AI差异化的关键AI算力使用成本急剧下降AI基础能力走向普惠，数据成为AI竞争焦点企业数据是AI竞争力的核心模型选择更多更灵活GPT token 价格下降大约倍（ 2023~2024 中期）的企业认为数据是AI实施的最大障碍的企业使用开源模型•多模态数据存储与管理效率低，缺乏开箱即用计算方案•传统架构成本高，数据更新速度跟不上业务变化•基于企业私有数据搭建 RAG 应用效率低•AI应用落地加速，数据部门与AI团队协作效率低•数据不全，质量差，可理解性严重影响AI效果数据基座架构落后数据和AI平台割裂数据任务处理低效构建和利用高质量数据，客户面临哪些挑战•数据分析门槛高、业务决策滞后•数据链路复杂、难以排查问题构建 AI-Ready 的数据智能平台一体化的Data+AI 平台适配 AI 的云原生数据基座AI Agent加持的平台智能化构建 AI-Ready 的数据智能平台 适配AI时代的大数据平台•传统架构升级，多模态数据处理开箱即用•实时流湖引擎，支持业务实时决策•ES 智能搜索开发，构建企业知识库应用适配 AI 的云原生数据基座1构建 AI-Ready 的数据智能平台 适配AI时代的大数据平台11.1 “数据智能即服务” DIaaS 平台：传统架构升级，多模态数据处理开箱即用极致 Lakehouse 性能客户成本下降2.7x30%性能提升50%多模态数据存储成本降低30%多模态数据读写效率提升更高多模态数据存储性价比大幅简化 Data + AI 技术架构AI-Ready数据基座AILake-house存储&管理效率低读写性能不足架构割裂缺乏弹性性能瓶颈运维困难腾讯云数据智能即服务平台 DIaaS兼容Iceberg生态批流一体表格式兼容Lance生态自研多模态文件格式多模态数据目录服务 TCCatalog计算感知加速引擎 TCQA计算感知｜智能分层｜分层加速数据分析智能体 TCDataAgent大数据智能管家基础大模型高性能融合计算引擎 MesonHadoop 生态+开源MLELK生态多模态数据处理腾讯云自研数据仓库自研多模态数据处理引擎EMR/DLCESTCHouseXpark开源解决方案自研解决方案关键挑战解决方案：新一代数据智能平台方案优势多模态智能数据湖 TCLake场景二：多模态数据处理场景一：传统大数据上云构建 AI-Ready 的数据智能平台 适配AI时代的大数据平台11.1 “数据智能即服务” DIaaS 平台：传统架构升级，多模态数据处理开箱即用极致 Lakehouse 性能客户成本下降2.7x30%性能提升50%多模态数据存储成本降低30%多模态数据读写效率提升更高多模态数据存储性价比大幅简化 Data + AI 技术架构AI-Ready数据基座AILake-house存储&管理效率低读写性能不足架构割裂缺乏弹性性能瓶颈运维困难腾讯云数据智能即服务平台 DIaaS兼容Iceberg生态批流一体表格式兼容Lance生态自研多模态文件格式多模态数据目录服务 TCCatalog计算感知加速引擎 TCQA计算感知｜智能分层｜分层加速数据分析智能体 TCDataAgent大数据智能管家基础大模型高性能融合计算引擎 MesonHadoop 生态+开源MLELK生态多模态数据处理腾讯云自研数据仓库自研多模态数据处理引擎EMR/DLCESTCHouseXpark开源解决方案自研解决方案关键挑战解决方案：新一代数据智能平台方案优势多模态智能数据湖 TCLake场景二：多模态数据处理场景一：传统大数据上云构建 AI-Ready 的数据智能平台 适配AI时代的大数据平台11.2 实时流湖引擎Setats，助力业务实时分析与决策45%流批一体，减少传统Lambda架构运维人力成本统一存储、合并优化资源消耗成本下降小时秒级增量计算，数据分析时效性大幅提升30%方案优势• 流批双链路，系统复杂，资源成本高• 实时分析能力不足，影响业务决策实时写入Flink离线同步KafkaHBase实时点查/范围查询ODSDWDDWSHive 离线计算车机信号数据• 流批一体，简化系统，成本显著降低。• 增量计算，低成本实现实时业务分析决策Kafka车机信号数据实时点查/范围查询SR/DorisSetats流湖引擎外表ODSDWDDWS增量刷新增量刷新Spark新架构 – 流批一体、增量计算原架构 – Hbase/Hive双链路构建 AI-Ready 的数据智能平台 适配AI时代的大数据平台11.3 ES 智能搜索开发，构建企业知识库应用毫秒级10亿向量规模下毫秒级响应10倍多级并行查询和文本预过滤，查询性能提升70%~90%向量裁剪和量化节省磁盘存储空间方案优势自建知识库痛点自建ES企业私域数据自建向量引擎LLMSearch Query两路召回，响应时长高架构复杂两套系统&两份存储成本高昂关键挑战解决方案：腾讯云ES智能搜索开发腾讯云 ES企业私域数据LLMSearch Query混合检索+AutoRAG，大幅降低知识库的整体开发门槛• 更低存储成本• 更高RAG性能• 更智能的RAG开发体验AutoRAG一体化的Data+AI 平台•一站式工作流，打通数据和AI全流程•多模一体化治理，构建AI-Ready统一语义构建 AI-Ready 的数据智能平台2 一体化的Data+AI 平台构建 AI-Ready 的数据智能平台一体化的Data+AI 平台22.1 一站式工作流WeData OneFlow：打通数据和AI全流程• 数据工程师和数据科学家、算法工程师，在同一平台完成数据工程/数据科学/机器学习协作与开发，实现CI/CD/CT流水线，提升协同效率DataOps & AIOps协同提效问题• 跨平台用户协作低效• AI效果追溯缺乏完整血缘支持• 数据复制，增加成本和安全风险多模态数据集统一管理• 打通数据平台和AI平台，打造“大数据开发编排-模型训练-模型应用”的丝滑体验方案优势原架构 – 双平台割裂大数据平台数据复制协作低效血缘断层数据工程师模型训练AI平台模型应用数据科学家数据分析数据治理数据工程师数据科学家/算法工程师新架构 –一站式协同与自动化DataOps + AIOps 一体化工作流（WeData One Flow）大数据编排工作流模型训练&部署工作流模型应用采集开发编排监控训练验证上线调优推理服务Agent工程高效协作与数据交换• 统一平台的方式实现“数据-AI”的全链路血缘，实现AI效果可追溯，可观测全链路血缘• 通过多模态数据集统一管理，避免数据复制和搬迁，统一权限管控，保障数据安全多模数据统一管理构建 AI-Ready 的数据智能平台一体化的Data+AI 平台22.2 WeData多模一体化治理，构建AI-Ready统一语义统一元数据（TC- Catalog）方案优势当前问题业务与技术对数据理解存在鸿沟新架构 – 一体化治理WeData Unity