京东云发布八大领先智算产品,助力企业火速用上AI大模型

赵璐
02-26 20:45
摘要

五大部署模式满足全场景需求面对中国2.5亿大模型用户的普惠需求,京东云推出了多形态部署方案,包括低成本轻量化服务,为初创企业提供裸金属智算服务与公有云Token调用模式

2月26日,京东云城市大会在深圳举行。会上,京东云发布八大极致性价比的智算产品,五种全场景大模型部署模式,同时推出“开发训练+场景应用”双引擎一站式平台,助力企业实现DeepSeek等大模型开箱即用、智能体深度开发与应用,全面打通从模型落地到产业智能升级的最后一公里。

京东集团技术委员会主席、京东云事业部总裁曹鹏表示,当下,全国大量企业都在加速部署DeepSeek,让员工零时差用上大模型。京东云认为,企业应用大模型应该根据场景找到性能与价值的黄金平衡点。京东云领先的异构算力调度引擎,可以帮助企业盘活存量算力,超智算一体集群将助力大中型企业构建智算底座,重塑企业AI生产力。

京东云DeepSeek大模型一体机,通过自研的算力池化能力、智能推理加速引擎,充分融合软硬件,实现了性能的全面提升,推理速度提升50%,企业可以根据自己的需求灵活选择不同版本,开箱即用。目前,在河南鹤壁、江苏宿迁、山东滨州,京东云已经助力多地政府基于现有基础设施本地化部署DeepSeek,既满足本地政务业务需求,又让当地企业不用投入资源,即可通过政务云调用DeepSeek。

基于京东集团复杂场景实践,京东云构建了一站式大模型产品矩阵,从底层的智算基础设施,到中间层的模型服务和工具,再到上层的Agent应用开发,支持企业快速部署大模型及应用。言犀AI开发计算平台,全面支持言犀大模型及20余种开源模型,整合超百种行业算法、工具链及高质量数据集,帮助企业基于业务需求高效开发专属大模型。

京东云超智算一体化算力集群,单集群万卡、全局10万卡级集群调度能力,依托软硬件协同优化,驱动大模型算力利用率(MFU)跃升至75%。云海AI存储,千亿级大模型全栈支持,4K随机写IOPS突破1000万级极速响应,存算分离架构实现性能提升的同时成本降低30%,构建超大规模AI训练的普惠存储底座。京东云高性能云网络,RDMA带宽提升至‌3.2T级‌,端到端通信时延压降至‌2微秒,支撑千亿参数模型‌无损训练‌,释放AI算力极限。

京东云vGPU AI算力平台,针对DeepSeek大模型技术特点,通过推理加速与内核驱动级优化,提升单台服务器推理性能50%。通过集群算力池化调度提升集群利用率70%。全面适配十余家国产化算力资源。同时借助AI全密态机密容器能力,确保模型参数与训练数据双域零泄露,为用户提供金融级安全防护。

智算中心功率密度是传统数据中心的5倍,对供电、散热的要求严苛。京东云自研的阿尔法智能算力模块,支持液冷系统一体化交付,PUE控制在1.15以内,同等规模成本直降15%;新一代液冷服务器,散热效能提升 50%,单机柜20KW年度省电8500度。

大模型安全是智能时代的终极防火墙。京东云大模型安全可信平台,超200种自研红蓝对抗攻击手法,覆盖全部31类合规风险,全流程AI检测精准狙击,风险识别率95%+,硬核护航千亿参数模型业务零漏洞。

京东科技人工智能业务总裁、京东探索研究院院长何晓冬表示,通用大模型的突破性进展正在加速全场景智能渗透,未来大模型小型化会成为规模化产业应用的关键。通向全面智能需要双轨并行,一是推动智能体向“超级智能体”演进,二是对传统数字化场景进行系统性升级。

随着应用深入,通过企业自有数据进行模型蒸馏势在必行。据了解,京东言犀大模型通过高质量模型蒸馏,服务了零售、健康、物流、金融等数百个场景,推理效率优化1.5倍,显存节约70%。当前,AI已经跑在京东内部100多个场景,服务超60万员工和20万商家。未来,模型蒸馏能力也将向企业开放。

(图片由受访企业提供)

编辑  赵璐  二审 玄伟东  三审 朱海燕


(作者:赵璐)
免责声明
未经许可或明确书面授权,任何人不得复制、转载、摘编、修改、链接读特客户端内容
推荐阅读

读特热榜

IN视频

鹏友圈

首页