CUDA 11.6 和 Python 3.7 支持的弃用 博客 CUDA 11.6 和 Python 3.7 支持已弃用 对于即将发布的 PyTorch 2.0 功能版本(目标是 2023 年 3 月),我们将支持 CUDA 11.7……PyTorch 基金会2023年2月2日
最新的 Colossal-AI 拥有新颖的自动并行性,可为 Stable Diffusion 2 节省高达 46 倍的成本 社区 最新的 Colossal-AI 拥有新颖的自动并行性,可为 Stable Diffusion 2 节省高达 46 倍的成本 作为 PyTorch 生态系统的新合作伙伴,我们 HPC-AI Tech 期待与……合作杨友2023 年 1 月 31 日
面向大众的 PyTorch 跟踪分析 博客 面向大众的 PyTorch 跟踪分析 我们很高兴地宣布 Holistic Trace Analysis (HTA) 的公开发布,这是一个开放……Anupam Bhatnagar, Xizhou Feng, Brian Coutinho, Yifan Liu, Sung-Han Lin, Louis Feng, and Yuzhen Huang2023 年 1 月 9 日
使用 PyTorch 和 Azure ML 进行分布式训练 社区 使用 PyTorch 和 Azure ML 进行分布式训练 假设您有一个非常大的 PyTorch 模型,并且您已经尝试了许多常见的技巧……Beatriz Stollnitz2023 年 1 月 6 日
2022 年 12 月 25 日至 12 月 30 日期间,PyTorch-nightly 依赖链遭到破坏。 博客 2022 年 12 月 25 日至 12 月 30 日期间 PyTorch-nightly 依赖链受损。 如果您在 2022 年 12 月 25 日至 12 月 30 日期间通过 pip 在 Linux 上安装了 PyTorch-nightly,……PyTorch 基金会2022 年 12 月 31 日
Torchserve 性能调优,动画绘图案例研究 博客 Torchserve 性能调优,动画绘图案例研究 在这篇文章中,我们讨论了 Torchserve 的性能调优,以便在生产中服务您的模型……Hamid Shojanazeri, Geeta Chauhan, Mark Saroufim, Jesse Smith2022 年 12 月 28 日
使用 PyTorch 扩展视觉模型训练平台 博客 使用 PyTorch 扩展视觉模型训练平台 TL;DR:我们展示了如何使用 PyTorch 和 FairScale 的 FullyShardedDataParallel (FSDP) API 编写大型……Vaibhav Aggarwal, Mannat Singh, Anjali Sridhar, Yanghao Li, Shoubhik Debnath, Ronghang Hu, Will Feng, Xinlei Chen, Tingting Markstrum, Diana Liskovich, Anupam Bhatnagar, Chay Ryali, Haoqi Fan, Tete Xiao, Min Xu, Rahul Iyer, Christoph Feichtenhofer, Ross Girshick, Piotr Dollar, Aaron Adcock, Wan-Yen Lo, CK Luk2022 年 12 月 22 日
使用 PyTorch FSDP 和 AWS 进行高效大规模训练 博客 使用 Pytorch FSDP 和 AWS 进行高效的大规模训练 尖端人工智能模型变得极其庞大。训练这些模型的成本和开销……Less Wright, Hamid Shojanazeri, Geeta Chauhan2022 年 12 月 16 日
在 IBM Cloud 上扩展 PyTorch FSDP 以训练基础模型 博客 在IBM Cloud上扩展PyTorch FSDP以训练基础模型 使用云原生方法进行大型模型训练对许多企业来说越来越感兴趣……Linsong Chu, Less Wright, Hamid Shojanazeri, Sophia Wen, Raghu Ganti, Geeta Chauhan2022 年 12 月 15 日
PyTorch 2.0 总结和概述入门 博客 PyTorch 2.0 入门总结和概述 介绍 PyTorch 2.0,这是我们迈向下一代 2 系列 PyTorch 版本的第一步。在……期间PyTorch 基金会2022 年 12 月 2 日
使用 PyTorch 2.0 加速 Hugging Face 和 TIMM 模型 博客 使用 PyTorch 2.0 加速 Hugging Face 和 TIMM 模型 torch.compile() 使得尝试不同的编译器后端变得容易,从而使 PyTorch 代码更快……Mark Saroufim2022 年 12 月 2 日
通过图转换优化生产 PyTorch 模型的性能 博客 通过图转换优化生产 PyTorch 模型的性能 1. 介绍 PyTorch 支持两种执行模式:即时模式和图模式。在即时模式下……Jade Nie, CK Luk, Xiaodong Wang, Jackie (Jiaqi) Xu2022 年 11 月 28 日
使用 Ax 进行高效多目标神经架构搜索 博客 使用 Ax 进行高效的多目标神经架构搜索 tl;dr Ax 中的多目标优化可以有效探索权衡(例如模型性能和……之间的权衡)David Eriksson, Max Balandat2022 年 11 月 22 日
使用 PyTorch Distributed 在 TorchMultimodal 中扩展多模态基础模型 博客 在 TorchMultimodal 中使用 Pytorch Distributed 扩展多模态基础模型 介绍 近年来,扩展模型尺寸已成为一个很有前途的研究领域。在……中Ankita De, Edward Wang (EcoF), Rohan Varma, Anjali Sridhar, Kartikay Khandelwal2022 年 11 月 21 日
介绍 TorchMultimodal – 一个用于加速多模态 AI 探索的库 博客 隆重推出 TorchMultimodal:一个用于加速多模态人工智能探索的库 我们正在宣布 TorchMultimodal Beta,这是一个 PyTorch 领域库,用于训练 SoTA 多任务多模态模型……Kartikay Khandelwal, Ankita De2022 年 11 月 17 日
PyTorch 企业支持计划更新 博客 PyTorch 企业支持计划更新 2021 年 5 月 25 日,我们宣布了 PyTorch 企业支持计划 (ESP),该计划使提供商能够开发……PyTorch 基金会2022 年 11 月 10 日
将 TorchVision 的转换扩展到对象检测、分割和视频任务 博客 将 TorchVision 的转换扩展到目标检测、分割和视频任务 注意:此帖子之前的版本发布于 2022 年 11 月。我们已更新……Philip Meier, Victor Fomin, Vasilis Vryniotis, Nicolas Hug2022 年 11 月 3 日
PyTorch 1.13 中的新库更新 博客 PyTorch 1.13 中的新库更新 总结 我们正在对当前的 PyTorch 库进行多项改进,同时还有……PyTorch 基金会2022 年 10 月 28 日
PyTorch 1.13 发布,包括 functorch 的 Beta 版本和对 Apple 新 M1 芯片的改进支持。 博客 PyTorch 1.13 发布,包括 functorch 的 beta 版本和对 Apple 新 M1 芯片的改进支持。 我们很高兴地宣布发布 PyTorch® 1.13(发布说明)!这包括稳定版本……PyTorch 基金会2022 年 10 月 28 日
PyTorch 基于跟踪的选择性构建 博客 PyTorch 基于跟踪的选择性构建 介绍 TL;DR:在移动设备、SBC(单板计算机)上运行 PyTorch 可能具有挑战性……Dhruv Matani, Suraj Subramanian2022 年 10 月 17 日