2024 年 6 月 11 日,中国信息通信研究院(以下简称“信通院”)公布了代码大模型的首轮评估名单,阿里云 AI 编程助手通义灵码首批通过,并在全部 100 多个能力评估中表现优秀,获得最高评级。
该标准于今年 1 月正式发布,涵盖通用能力、专用场景能力和应用成熟度三大部分,包括 16 个能力项、100 多个能力要求,全面从输入多样性、任务多样性、语言完备度、结果可接收性、结果准确度等维度,考核代码大模型的全栈技术能力。
作为首批参评企业,阿里云通义灵码在本次评估中获得4+ 级评级,是评分最高的代码大模型之一。
信通院评测结果显示:
-
在通用能力方面,通义灵码在代码转换、代码检查及修复、代码优化等方面表现突出;
-
在专用场景方面,通义灵码提供网站开发、数据库开发、大数据开发、嵌入式开发等多个场景支持能力;
-
在应用成熟度方面,通义灵码具备较完善的数据合规及数据分类分级机制,且模型稳定性及可维护性表现优异,在模型推理性能、模型服务风险可控性等方面均表现优秀。
通义灵码熟练掌握 Java、Python、Go、JavaScript、TypeScript、C/C++、C#等 200 多种编程语言,可以辅助写代码、读代码、查 Bug、优化代码等。为满足企业客户在私域知识检索、企业数据合规、统一管理等方面的需求,通义灵码推出标准版、专属版两大企业版方案。标准版可以接入企业私域知识,实现私域知识问答,让 AI 推荐的代码更贴合企业规范;专属版在标准服务之外,提供公共云上专属实例部署、独立企业账号系统等服务,能更好地帮助企业定制模型、降低算力成本。
目前,通义灵码每日推荐代码超 3000 万次,被开发者采纳的代码超亿行,是国内最受欢迎的编程助手,已广泛用于金融、制造、互联网、交通、物流、能源等行业,显著提高企业及个人开发效率。