金山云新一代GPU云服务器上线 基于Tesla T4性能提升350%

发布时间:2022-07-17 06:33:01 作者:wwwwycom 阅读量:4068

近日,金山云基于Tesla T4的GPU云服务器正式对外商用,这也是继去年国内首家商用Tesla V100之后,金山云在GPU云服务器领域再一次拔得头筹,代表金山云在新技术应用上始终处于行业领先水平。

作为全面升级的新一代GPU云服务器,T4采用了最新的Turing架构,单卡提供8.1 TFLOPS的单精浮点计算能力和65 TFLOPS的混合精度(FP16/FP32)矩阵计算能力。Tesla T4相比于上一代产品Tesla P4,其整体性能有了较大的提升,在给定场景下,T4的推理性能提升超过350%。

震撼的多精度推理性能为AI全面加速

Tesla T4基于Turing架构,提供了更加强大的训练和推理能力,在原有对FP32和FP16支持的基础上,Turing架构中的Tensor Core新增了对INT8和INT4的支持,并探索性地推出了INT1精度模式。通过对多种精度模式的支持,T4能够有效缩短在线预测和离线训练时长。根据Nvidia公布的测试数据,在语言推理的场景中(NLP: GNMT Model),T4相对于P4,其性能提升超过350%。

Tesla T4使用TU104核心,搭载136亿个晶体管,共40个SM(stream multiprocessor),每个SM单元中有64个CUDA Core和8个混合精度的矩阵运算单元Tensor Core,共2560个CUDA core和320个Tensor core,提供8.1 TFLOPS的单精度性能和65 TFLOPS的混合精度(FP16/FP32)性能。此外,T4中还集成了Turing架构首次引入的RT Core,可实现高效的光线追踪(Ray Tracing)功能,在图形图像渲染方面有着广泛的应用。目前,金山云基于T4的GPU加速计算服务已全面商用,为诸多客户提供着高性能的计算支撑。

优异的机器学习能力让技术更智能

T4针对深度学习应用场景,进行了全方位的优化。首先,T4卡配备了320个Tensor Core。Tensor Core作为专门用于执行张量/矩阵运算的计算单元,能够为训练和推理场景中的矩阵运算提供极大的加速,被广泛用于各种深度学习的场景中。Turing Tensor Core相对于先前的Volta版,强化了推理的功能,支持了INT8和INT4两种精度模式,算力分别高达130TOPS和260TOPS。其次,T4继承了Volta架构中首次引入的Multi-Process Service(MPS)功能,优化了对batch较小时推理的性能,减少启动延迟,从而能够支持更多的并发请求。

及时响应是提升用户参与度的关键,随着模型准确性和复杂性的提高,快速交付正确答案所需的计算能力也在呈指数级提升。T4拥有先进的实时推理性能,在会话式人工智能、推荐系统和可视化搜索等场景的处理上,可提供低延时、高吞吐量的计算能力,进而实时满足更多的处理请求。T4通过优异的机器学习推理能力让技术应用更为智能。除了深度学习外,T4在视频转码和虚拟桌面等诸多场景中都能够发挥重要的作用。

作为中国领先的云计算服务提供商,金山云始终致力于通过最前沿的技术、最高效的产品为客户提供更加安全、稳定、便捷的云服务。目前基于T4的 GPU云服务器已经开放商用,卓越的深度学习推理性能,让用户能够更加快速、高效地构建AI业务,运行大规模模型推理应用。同时,基于Tesla T4的实例具备易扩展和高性价比的特性,能够为用户节省大量计算成本,有效提升AI产品迭代的速度,提高企业AI竞争力。

***本网站图片,文字之类版权申明,因为网站可以由注册用户自行上传图片或文字,本网站无法鉴别所上传图片或文字的知识版权,如果侵犯,请及时通知我们,本网站将在第一时间及时删除。

我要评论

网友评论


评论时间:2024-01-03 10:30:02

13.高可弹性云主机的组成 用性虚拟主机服务器价格 高可用性

回复

评论时间:2023-03-29 04:30:02

其中,数据中虚拟主机怎么申请教程 心及云计算服务收入占比最大,且近年来呈现逐年增加免费虚拟主机排行榜 呈现逐年增加趋势

回复

评论时间:2023-01-18 20:30:02

3.发展历史:20世纪6服务器搭建app源码 0年代初出现了第一台通用计算机芯片——Inte游戏服务器搭建教程 用计算机芯片——Intel X86,从此进入了微处理器时代

回复

评论时间:2022-10-01 20:30:02

2.4记录格式(MD5)2.5文件结构虚拟云主机是干什么的 服务器架子价格 格式(MD5)2.5文件结构

回复

评论时间:2022-09-28 16:30:01

它不仅能提供稳定可靠的网络访问服务,还具有很强的管理和维护能力,在国移动云主机价格 际互联网上发挥着重要作用怎么租服务器 维护能力,在国际互联网上发挥着重要作用

回复

评论时间:2022-08-25 20:30:02

11.如果您想把这个文档作为附件保留下来的话,请不要再关闭它了,因为这已经不是以服务器机柜450深度 前那个文档了,而是最新的版本本地服务器搭建网站 留下来的话,请不要再关闭它了,因为这已经不是以前那个文档了,而是最新的版本

回复

  热门标签

极速云服
Catfish(鲶鱼) Blog V 4.7.3