使用 PyTorch 2.0 加速 Hugging Face 和 TIMM 模型 博客 使用 PyTorch 2.0 加速 Hugging Face 和 TIMM 模型 torch.compile() 让尝试不同的编译器后端变得更加容易,从而提升 PyTorch 代码的运行速度……Mark Saroufim2022 年 12 月 2 日
通过图转换优化生产级 PyTorch 模型性能 博客 通过图转换优化生产 PyTorch 模型的性能 1. 引言 PyTorch 支持两种执行模式:Eager 模式和图模式。在 Eager 模式中……Jade Nie, CK Luk, Xiaodong Wang, Jackie (Jiaqi) Xu2022 年 11 月 28 日
利用 Ax 进行高效的多目标神经架构搜索 博客 使用 Ax 进行高效的多目标神经架构搜索 摘要:Ax 中的多目标优化实现了对权衡(例如模型性能与……之间的权衡)的高效探索。David Eriksson, Max Balandat2022 年 11 月 22 日
使用 PyTorch Distributed 在 TorchMultimodal 中扩展多模态基础模型 博客 在 TorchMultimodal 中使用 Pytorch Distributed 扩展多模态基础模型 引言 近年来,扩展模型规模已成为一个颇具前景的研究领域。在……Ankita De, Edward Wang (EcoF), Rohan Varma, Anjali Sridhar, Kartikay Khandelwal2022 年 11 月 21 日
TorchMultimodal 简介 – 一个用于加速多模态 AI 探索的库 博客 隆重推出 TorchMultimodal:一个用于加速多模态人工智能探索的库 我们宣布推出 TorchMultimodal Beta,这是一个用于训练最先进(SoTA)多任务多模态模型的 PyTorch 领域库……Kartikay Khandelwal, Ankita De2022 年 11 月 17 日
PyTorch 企业支持计划更新 博客 PyTorch 企业支持计划更新 2021 年 5 月 25 日,我们宣布了 PyTorch 企业支持计划 (ESP),使服务提供商能够开发……PyTorch 基金会2022 年 11 月 10 日
将 TorchVision 的变换功能扩展至目标检测、分割和视频任务 博客 将 TorchVision 的转换扩展到目标检测、分割和视频任务 注:本文的早期版本发布于 2022 年 11 月。我们已对……进行了更新Philip Meier, Victor Fomin, Vasilis Vryniotis, Nicolas Hug2022 年 11 月 3 日
PyTorch 1.13 发布,包含 functorch 测试版以及对苹果新款 M1 芯片的改进支持。 博客 PyTorch 1.13 发布,包括 functorch 的 beta 版本和对 Apple 新 M1 芯片的改进支持。 我们很高兴地宣布发布 PyTorch® 1.13(发布说明)!其中包括稳定版本……PyTorch 基金会2022年10月28日
PyTorch 基于跟踪的选择性构建 博客 PyTorch 基于跟踪的选择性构建 引言 摘要:在移动设备、SBC(单板计算机)上运行 PyTorch 可能具有挑战性……Dhruv Matani, Suraj Subramanian2022 年 10 月 17 日
使用 FSDP 在云 TPU 上扩展 PyTorch 模型 博客 使用 FSDP 在 Cloud TPU 上扩展 PyTorch 模型 引言 研究界见证了大型模型在 NLP 等领域的诸多成功……Ronghang Hu, Vaibhav Singh, Jack Cao, Milad Mohammadi, Yeounoh Chung, Shauheen Zahirazami, Ross Girshick2022 年 10 月 13 日
Meta 生产级 PyTorch 模型的性能调试 博客 Meta 生产环境 PyTorch 模型的性能调试 1. Meta 的 AI 性能分析 (MAIProf) 图 1:Meta AI 的简化说明……CK Luk, Lei Tian2022 年 9 月 29 日
宣布召开 2022 年 PyTorch 会议 博客 宣布 2022 年 PyTorch 大会 我们很高兴地宣布,PyTorch 会议将作为卫星活动重回线下……PyTorch 基金会2022 年 9 月 26 日
PyTorch 加入 Linux 基金会,进一步加强其治理 博客 PyTorch 通过加入 Linux 基金会加强其治理 今天,我很自豪地宣布,PyTorch 将作为……移交给 Linux 基金会 (LF)Soumith Chintala2022 年 9 月 12 日
利用 TorchAudio 和 Flashlight Text 在 PyTorch 中实现快速束搜索解码 博客 使用 TorchAudio 和 Flashlight Text 在 PyTorch 中进行快速波束搜索解码 来自 Flashlight Text(Flashlight ML 框架的一部分)的业界领先速度的束搜索解码现已可用……Caroline Chen, Jacob Kahn (@jacob_d_kahn)2022 年 8 月 29 日
nvFuser 简介:适用于 PyTorch 的深度学习编译器 博客 介绍 nvFuser,一个用于 PyTorch 的深度学习编译器 nvFuser 是一个用于 NVIDIA GPU 的深度学习编译器,它能自动进行即时(JIT)编译,以实现快速且……Christian Sarofeen, Piotr Bialecki, Jie Jiang, Kevin Stephano, Masaki Kozuki, Neal Vaidya, Stas Bekman2022 年 8 月 26 日
在 CPU 上利用 Channels Last 加速 PyTorch 视觉模型 博客 使用 CPU 上的 Channels Last 加速 PyTorch Vision 模型 概述:内存格式对运行视觉模型时的性能有重大影响,通常 Channels Last……Mingfei Ma (Intel), Vitaly Fedyunin (Meta), Wei Wei (Meta)2022 年 8 月 24 日
使用 TorchVision 中的新 API 轻松列出和初始化模型 博客 使用 TorchVision 中的新 API 轻松列出和初始化模型 TorchVision 现在支持按名称列出和初始化所有可用的内置模型和权重。这……Vasilis Vryniotis and Laurence Rouesnel2022 年 8 月 18 日
通过 Bfloat16 增强英特尔® 至强® 可扩展处理器上的 PyTorch 博客 使用 Bfloat16 增强 PyTorch 在 Intel® Xeon® 可扩展处理器上的性能 概述:近年来,日益复杂的 AI 模型对硬件提出了新的要求……Mingfei Ma (Intel), Vitaly Fedyunin (Meta), Wei Wei (Meta)2022 年 8 月 16 日
PlayTorch 应用简介:快速创建移动端 AI 体验 博客 介绍 PlayTorch 应用:快速创建移动 AI 体验 去年 12 月,我们发布了 PyTorch Live,这是一个在几分钟内构建 AI 驱动的移动原型的工具包……PlayTorch 团队2022 年 7 月 22 日