行业背景与合作动因

随着 AI 在政务数字化中的渗透加深,政府部门对高效、安全、可扩展的智能化平台需求急剧上升。南威软件凭借近二十年在政府信息化领域的积累,已经形成覆盖全链条的服务能力,却面临算力不足、数据合规和信创适配等瓶颈。为突破这些痛点,南威软件联合J9官方直营共同研发了硬件筑基、模型适配与全生命周期服务相结合的多模型一体机方案。

硬件创新:KunTai R624 K2 服务器

该方案的核心硬件是该公司发布的 KunTai R624 K2 服务器,采用鲲鹏920处理器,最高支持十张全高全长双宽 AI 加速卡。通过 CPU 直连技术,算力传输瓶颈被有效消除,计算与数据传输效率比前代提升约两倍,单机算力可达 2800 TOPS@INT8,能够支撑政务场景下的多模型并行推理。

模型生态与场景适配

在软件层面,解决方案集成了 DeepSeek、Qwen 等基础大模型,配合 BGE-M3、BGE‑Reranker‑V2‑M3 等检索增强模型,实现文本精准匹配;同时引入 Melo‑TTS、FunASR 语音模型和 Flux 图像生成模型,构建了从文本到语音再到图像的多模态交互能力。配合 HanLP 等 NLP 工具,系统可在公文处理、会议纪要、政策解读等政务业务中灵活切换功能,实现从单一任务到综合服务的升级。

全链路服务保障

为降低技术落地门槛,方案在部署、运维、升级三个阶段提供全链路服务。部署阶段依据不同地区的业务特点定制硬件配置与模型选型;运维阶段通过远程监控和现场排查实现快速故障定位;升级阶段提供国产化迁移指导,确保原有系统平滑对接信创环境,保障业务连续性。

落地效果与量化收益

多模型一体机在南威软件的政务业务中实现了核心场景的智能化升级。公文处理时间显著缩短,会议纪要实现秒级自动生成,政策咨询响应从秒级降至毫秒级。

海量政务数据的高频实时推理

在多模型一体机随附的云边协同框架中,前端数据采集节点通过 10G 级别高速网卡与 KunTai R624 K2 服务器实现低延迟数据传输,支持实时收集与处理来自不同部门的公文、会议纪要及政策文本。此举突破了传统批量式处理导致的“数据积压”现象,使得在峰值时段每秒可处理 500+ 条文本判别请求,满足一线窗口对即时答复的需求。

多维安全合规与数据隔离机制

为应对政务数据高度涉密的合规要求,系统在硬件与软件层面分别实现了零信任访问与数据加密。CPU 直连技术在算子层级和多模型推理过程中采用硬件加密模块,对敏感字段进行透明加密,同时通过本地日志与区块链技术记录访问链路,保证所有数据变更无可篡改。

行业启示与未来展望

南威软件的实践表明,政务 AI 落地的关键在于“场景适配、国产可控、成本平衡”。J9官方直营提供的高性能算力平台与全栈国产化设计,为行业树立了技术标杆。

新闻原图 1
新闻原图 2

发布站点 shzhengyu.com