不止量化及LORA - 原生PyTorch性能及記憶體優化精解 ✴︎深入介紹深度學習硬體，包括 CPU、GPU、記憶體與分散式系統。 ✴︎系統化學習 PyTorch 張量、運算元、自動微分與動... more

本書致力於探索如何在大規模深度學習模型訓練中，**限度地提高性能和優化顯存使 用。本書面向深度學習從業者，尤其是希望深入瞭解並提升模型訓練效率的工程師與研究 人員。隨著深度學習模型和資料規模的迅速增長... more

PyTorch/XLA和Taichi編譯器等多個具有廣泛影響力的開源項目。目前在工業界專註于大規模語言模型訓練的基礎設施開發與性能優化工作。 楊占略，清華大學本科，哥倫比亞大學碩士，資深技術專家。曾先後任職于蘋果、百度、太極圖形公司，分別從事深度學習...... more