金山办公与 NVIDA 团队合作,加速 WPS AI 落地
据财联社报道,6 月 30 日,金山办公与 NVIDIA 团队合作,加速 WPS AI 落地,通过 NVIDIA Tensor Core GPU、TensorRT 提升图像文档识别与理解的推理效率;借助 NVIDIA Triton 推理服务器的部署,成功优化 GPU 利用率,提供高推理吞吐量。相比于 CPU 其 pipleline 耗时共下降 84%;采用 NVIDIA Triton 推理服务器部署,其部署成本节省了 23%。
据财联社报道,6 月 30 日,金山办公与 NVIDIA 团队合作,加速 WPS AI 落地,通过 NVIDIA Tensor Core GPU、TensorRT 提升图像文档识别与理解的推理效率;借助 NVIDIA Triton 推理服务器的部署,成功优化 GPU 利用率,提供高推理吞吐量。相比于 CPU 其 pipleline 耗时共下降 84%;采用 NVIDIA Triton 推理服务器部署,其部署成本节省了 23%。