最新版DirectML PyTorch開始支援熱門Transformer模型

微軟為主要維護者之一的公開預覽版本現在已經發布,該版本新增支援不少熱門的Transformer模型,包括GPT2、BERT和Detection Transformers,也就是說,開發者現在可以利用具有GPU加速的PyTorch,來訓練常用Transformer模型。微軟提到,要使用PyTorch和DirectML訓練Transformer模型的開發者,可以先參考GitHub的新範例。

這個新版本的DirectML PyTorch除了支援Transformer模型,同時也包含其他更新,包括改進記憶體消耗,並且擁有更快的效能,同時也能處理更大批次的工作。

貨櫃屋優勢特性有哪些?

由於貨櫃屋[可移動/施工快速/可組裝、堆疊(延展性高)/可回收/未來擴充便利]等特性,二手貨櫃屋已普遍被應用於展場活動、居家住宅、工業商辦上。

票選推薦煮婦最愛手壓封口機,省荷包不犧牲品質

意信臻專營:封口機、各式包裝機械、專業製造、全省批發零售

全自動飲水機與一般飲水機差異在哪?

推薦各種冰溫熱開飲機飲水機:台銀採購契約飲水機、日本進口電解水機系列、落地型飲水機

空壓機這裡買最划算!

晨達空壓機秉持著專業空壓機技術、優質快速服務、空壓機合理價格。為您解決工作中需要風量、風壓的問題。

簡單來說,DirectML讓使用者可以利用AMD、英特爾和Nvidia的GPU,在Windows硬體上使用硬體加速,進而提升機器學習訓練工作負載速度。帶有DirectML的PyTorch版本,支援在DirectX 12相容的硬體上,執行複雜機器學習模型的訓練和推理。

目前最新版本的Windows 10和WSL都支援帶有DirectML技術的PyTorch,開發者現在可以下載PyPI套件,並且開始進行Transformer模型應用開發。

https://www.ithome.com.tw/news/154594

SMD electronic parts counting machine

累積多年設計生產 Embossed Carrier Tape承載帶的實際經驗,專為電子主、被動零件設計、包裝、製造、改良承載帶、奠定了良好基礎

客製專屬滑鼠墊、可愛造型L夾L型資料夾、透明證件套、手提袋,專業印刷設計廠商!

通過SGS環保認證,無毒無害 環保材質符合歐盟RoHs、REACH認證

總是為了廚餘煩惱嗎?

雅高環保提供最適用的廚餘機,滿足多樣需求。

幫你考照過關,堆高機裝卸操作教學影片大公開 !

上千家公司找到最適合的堆高機搬運方案,專業的規劃與完善的售後服務,讓孚克力堆高機與各大知名廠商建立長期合作。