跳到正文
Hugging Face Blog·· 21 小时前精选AI 评分62

Hugging Face 推出 TorchNeuron,让模型原生运行在 AWS Trainium 上

TorchNeuron: running HF models on AWS Trainium is easier than ever

AI 导读

Hugging Face 发布 TorchNeuron,为 PyTorch 在 AWS Trainium 上提供原生后端,Transformers、Diffusers 和 Kernels 原生支持,10 月 20 日起以公开测试形式提供,可通过 pip install torch-neuronx 安装。

推荐理由

原文给出 TorchNeuron 在 Transformers、Diffusers、TRL 中的接入方式与支持比例变化,可据此判断 Trainium 上的迁移成本。

来源:Hugging Face Blog · huggingface.co

木叶资讯微信公众号二维码

关注公众号,每天收到精选与决策卡

长按识别二维码