火山引擎 VeDI 核心产品 DataTester 再进化，A/B 大模型应用评测功能上线

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群

近日，火山引擎 A/B 测试产品 DataTester 上线了 A/B 大模型应用评测功能。此次升级不仅强化了模型上线前的基础能力评测，还新增了针对线上使用场景的全面、系统检测与评估机制，为企业在模型应用的全周期管理中提供了有力支持。

DataTester 的 A/B 大模型应用评测功能涵盖了 ChatBot、Agent（多能力智能体）、RAG 与 Summarization（智能总结）等多种目标落地场景。通过内置丰富的分析指标，该功能能够自动生成模型线上报告，简化 A/B 实验流程，促进策略的高效发布。其特色包括模型评测与指标优化、对比实验择优的模型与 Prompt 无感下发、实时告警与全线业务检测，以及策略回测与效果分析等完整监测链路，确保模型在上线后的每一个阶段都能得到科学有效的管理和优化。

此次升级也彰显了 DataTester“开箱即用”的智能决策特性，降低了业务端用户的使用门槛，使得数据流与业务流能够更加顺畅地融合。作为火山引擎数智平台 VeDI 旗下的核心产品，DataTester 凭借其实验管理能力和场景化特型实验能力得到了市场认可。依托字节跳动长期的技术沉淀与先进算法，DataTester 现已支持字节内部 500 多个业务，并成功服务于美的、华泰证券、博西家电、乐刻健身等上百家外部企业，以一站式实验管理解决方案持续驱动业务增长。

火山引擎 VeDI 在不断提升产品平台服务能力的同时，也在积极拓展企业数据应用场景。除了 DataTester 所提供的 A/B 实验能力外，VeDI 还推出了数据洞察分析 DataWind、增长分析 DataFinder、企业精准营销的 VeCDP 与 GMP 等一系列数据工具，旨在覆盖企业所需的全链路数智能力，助力企业实现全场景数据消费，充分释放数据价值。

目前，火山引擎数智平台已与金融、大消费、泛互联网、汽车等多个行业的众多知名企业展开深入合作，共同探索以数据消费驱动业务增长的新模式。在大模型时代，火山引擎数智平台 VeDI 将继续秉持“数据驱动业务、AI 赋能产品”的核心理念，为企业数智化转型提供持续的动力和支持。