人工智能正在成为新一轮科技革命和产业变革的核心驱动力，随着大模型等关键技术的快速发展，各类应用也在快速拓展。然而，大模型能力是否真正契合并满足实际应用的严苛需求，必须经过严格而全面的测评与验证流程，保障大模型在应用中安全可靠、减少“幻觉”的存在。近日，京东言犀大模型凭借在数据安全、模型性能、模型效率等多方面的优异评测成果，成功通过了中国信通院(下称“信通院”)软件平台功能性评估，成为行业内首批获得此项认证的产品之一。

作为工信部的直属科研事业单位，信通院构建了完善的“大模型基础能力完备性”测评体系，旨在通过科学的方法与标准，全方位、多维度地为大模型的实际应用提供有力支撑。评测内容包括数据安全、性能评测、效率评测三个模块。通过测评促进大模型的安全性、可靠性、稳定性与兼容性，让技术平台底座适应不同大模型的需求，从而确保大模型在技术底座上顺利运行。

在数据安全方面，言犀大模型拥有完善的保障体系，在内部建立了《数据安全管理办法》等一系列制度规范，从源头上确保数据安全管理工作的有效推进。制度层面，制定系列规范形成四级架构体系，精细化分类分级且定期更新清单，多手段审查及严控权限审批。在防泄露和接口安全管理上协同发力，言犀大模型会定期扫描并及时修复高危漏洞，通过 Elasticsearch 集群管理等技术手段保障数据安全。

在模型性能方面，言犀大模型在数学计算推理、综合性问答、逻辑推理等方面展现出了优异的文字理解、归纳和推理能力。模型识别能力在大语言垂直领域表现突出，在基础任务、专业能力及文本写作识别等文本相关任务中展现高专业水平。在模型泛化能力方面，面对新任务和跨数据集能有效迁移已学知识，并提供合理的解题方案和思路。在稳定性测试中，多种测试方法及复杂环境下仍可保持稳定输出，例如在数学问题求解中，即使添加无关条件，平台仍能准确推理并给出稳定答案，体现了其在复杂环境下的可靠性能。

在模型效率方面，言犀大模型在训练与推理时间上表现出色，训练过程中通过监测损失值保障学习优化能力，提升预测分类准确性。在不同输入大小下的推理速度测试中，推理速度虽随输入长度有所变化，但相比同类模型表现依旧十分突出，在实际应用中能够快速响应用户请求。在内存占用与模型大小方面，言犀大模型在运行时，CPU 和 GPU 资源利用合理，并可动态调整资源分配。同时，在特定数据类型下可有效控制模型大小，兼顾性能与存储传输便利性。

依托京东的供应链场景，自2023年言犀大模型发布以来，京东始终坚持自研、京东场景验证，一体化开放的三步走策略进行大模型的布局。目前京东言犀大模型拥有全系的大模型家族，包括30亿、100亿、140亿、810亿、4700亿不同参数的模型， 模型能力处于行业第一梯队，并在2024年初通过了《生成式人工智能服务管理暂行办法》备案。

京东言犀大模型已先在产业里跑起来，并广泛应用于电商直播、营销素材生成、代码编写、研报生成、合同审核、知识检索、订单率履约、城市治理等场景，帮助零售、健康、金融、物流、工业等481个真实业务实现优化运营与降本增效，2024年末月度调用量较年初提升超万倍。

值得关注的是，不久前京东云依托言犀大模型，发布了面向品牌商家的“AI营销搭子”——言犀智能营销平台，包括言犀小智2.0、智能混剪平台、智能导购、智能外呼、数字人等十大AI营销产品。目前，已经有超过80万商家在使用言犀大模型的智能交互产品，用户每天完成上千次智能交互，AIGC内容的使用率高达80%，为商家平均提升转化率30%，为商家营销提效降本，开创了新的增长空间。