PyTorch

מתוך המכלול, האנציקלופדיה היהודית
קפיצה לניווט קפיצה לחיפוש

שגיאת לואה ביחידה יחידה:תבנית_מידע בשורה 261: תבנית תוכנה ריקה. PyTorch היא ספריית למידת מכונה בקוד פתוח המבוססת על ספריית Torch[1][2][3] ומשמשת ליישומים כגון ראייה ממוחשבת ועיבוד שפה טבעית.[4] היא פותחה בעיקר על ידי מעבדת FAIR ‏(Facebook's AI Research lab).[5][6][7] PyTorch היא תוכנה חופשית בעלת קוד פתוח המפורסמת תחת רישיון BSD Modified. אף על פי שממשק הפייתון הוא המוקד העיקרי שלה, יש לה גם ממשק ++C.[8]

מספר מוצרי תוכנה של למידה עמוקה בנויים על גבי PyTorch, כולל הטייס אוטומטי של טסלה[9]Pyro של אובר, [10] Transformers של Hugging Face,[11] ‏PyTorch Lightning,[12][13] ו-Catalyst.[14][15]

PyTorch מספקת שתי תכונות ברמה גבוהה:[16]

היסטוריה

פייסבוק מפעילה גם PyTorch וגם Convolutional Architecture להטמעת תכונות מהירה (Caffe2), אבל מודלים שהוגדרו על ידי שתי המסגרות לא היו תואמים זה לזה. פרויקט Open Neural Network Exchange (ONNX) נוצר על ידי פייסבוק ומיקרוסופט בספטמבר 2017 להמרת מודלים בין מסגרות. Caffe2 מוזג לתוך PyTorch בסוף מרץ 2018.[17]

טנזורים של PyTorch

PyTorch מגדיר מחלקה בשם Tensor (או torch.Tensor ) לאחסן ולפעול על מערכים מלבניים רב-ממדיים הומוגניים של מספרים. PyTorch Tensors דומים ל-NumPy Arrays, אך ניתן להפעיל אותם גם על Nvidia GPU בעל יכולת CUDA. ספריית PyTorch תומכת בתתי סוגים שונים של Tensors. [18]

מודלים

מודל Autograd

PyTorch משתמש בשיטה הנקראת בידול אוטומטי. רכיב הקלטה מקליט את הפעולות שביצעו, ולאחר מכן הוא משמיע אותו לאחור כדי לחשב את הגרדיינטים. שיטה זו חזקה במיוחד בעת בניית רשתות עצביות כדי לחסוך זמן ב-epoch אחד על ידי חישוב בידול של הפרמטרים במעבר קדימה.

מודל Optim

torch.optim הוא מודול שמיישם אלגוריתמי אופטימיזציה שונים המשמשים לבניית רשתות עצביות. רוב השיטות הנפוצות כבר נתמכות, כך שאין צורך לבנות אותן מאפס.

מודל nn

PyTorch autograd מקל על הגדרת גרפים חישוביים ולקחת מעברי צבע, אבל autograd גולמי יכול להיות ברמה מעט נמוכה מדי להגדרת רשתות עצביות מורכבות. זה המקום שבו nn יכול לעזור.

קישורים חיצוניים

ויקישיתוף מדיה וקבצים בנושא PyTorch בוויקישיתוף

הערות שוליים

  1. ^ Yegulalp, Serdar (19 בינואר 2017). "Facebook brings GPU-powered machine learning to Python". InfoWorld. נבדק ב-11 בדצמבר 2017. {{cite news}}: (עזרה)
  2. ^ Lorica, Ben (3 באוגוסט 2017). "Why AI and machine learning researchers are beginning to embrace PyTorch". O'Reilly Media. נבדק ב-11 בדצמבר 2017. {{cite web}}: (עזרה)
  3. ^ Ketkar, Nikhil (2017). "Introduction to PyTorch". Deep Learning with Python (באנגלית). Apress, Berkeley, CA. pp. 195–208. doi:10.1007/978-1-4842-2766-4_12. ISBN 9781484227657.
  4. ^ "Natural Language Processing (NLP) with PyTorch – NLP with PyTorch documentation". dl4nlp.info (באנגלית). נבדק ב-2017-12-18.
  5. ^ Patel, Mo (2017-12-07). "When two trends fuse: PyTorch and recommender systems". O'Reilly Media (באנגלית). נבדק ב-2017-12-18.
  6. ^ Mannes, John. "Facebook and Microsoft collaborate to simplify conversions from PyTorch to Caffe2". TechCrunch (באנגלית). נבדק ב-2017-12-18. FAIR is accustomed to working with PyTorch – a deep learning framework optimized for achieving state of the art results in research, regardless of resource constraints. Unfortunately in the real world, most of us are limited by the computational capabilities of our smartphones and computers.
  7. ^ Arakelyan, Sophia (2017-11-29). "Tech giants are using open source frameworks to dominate the AI community". VentureBeat (באנגלית אמריקאית). נבדק ב-2017-12-18.
  8. ^ "The C++ Frontend". PyTorch Master Documentation. נבדק ב-2019-07-29.
  9. ^ Karpathy, Andrej. "PyTorch at Tesla - Andrej Karpathy, Tesla".
  10. ^ "Uber AI Labs Open Sources Pyro, a Deep Probabilistic Programming Language". Uber Engineering Blog (באנגלית אמריקאית). 2017-11-03. נבדק ב-2017-12-18.
  11. ^ PYTORCH-TRANSFORMERS: PyTorch implementations of popular NLP Transformers, PyTorch Hub, 2019-12-01, נבדק ב-2019-12-01
  12. ^ PYTORCH-Lightning: The lightweight PyTorch wrapper for ML researchers. Scale your models. Write less boilerplate, Lightning-Team, 2020-06-18, נבדק ב-2020-06-18
  13. ^ "Ecosystem Tools". pytorch.org (באנגלית). נבדק ב-2020-06-18.
  14. ^ GitHub - catalyst-team/catalyst: Accelerated DL & RL, Catalyst-Team, 2019-12-05, נבדק ב-2019-12-05
  15. ^ "Ecosystem Tools". pytorch.org (באנגלית). נבדק ב-2020-04-04.
  16. ^ "PyTorch – About". pytorch.org. אורכב מ-המקור ב-2018-06-15. נבדק ב-2018-06-11.
  17. ^ "Caffe2 Merges With PyTorch". 2018-04-02.
  18. ^ "An Introduction to PyTorch – A Simple yet Powerful Deep Learning Library". analyticsvidhya.com. 2018-02-22. נבדק ב-2018-06-11.
הערך באדיבות ויקיפדיה העברית, קרדיט,
רשימת התורמים
רישיון cc-by-sa 3.0

34798115PyTorch

אוחזר מתוך "https://www.hamichlol.org.il/w/index.php?title=PyTorch&oldid=2133166"