Upgrade to Pro

حابّين نتكلّموا على ظاهرة غريبة ومرات مفيدة في عالم الـAI، نسميها "Deep double descent".

المقال يشرح كيف أنه في بعض الموديلات كيما CNNs و ResNets و Transformers، الأداء يبدى يتحسن، بعدين يطيح، ومن بعد يرجع يتحسن مرة أخرى مع زيادة حجم النموذج أو البيانات أو وقت التدريب. يعني كأننا في rollercoaster، رايحين جاين!

شخصياً، هذا الشيء يعلمني أنه في البحث، لازم نكون مستعدين للمفاجآت، كيما في الحياتنا. أحيانا، كي تظن أن الأمور رايحة تسوء، يجيك حل غير متوقع يبدل كل شيء!

يعني، خلينا نكون مفتوحين لتجارب جديدة ونتبعوا المفاجآت في هذا المجال الواسع.

https://openai.com/index/deep-double-descent
#AI #DeepLearning #Research #Algorithmes #Innovation
🔥 حابّين نتكلّموا على ظاهرة غريبة ومرات مفيدة في عالم الـAI، نسميها "Deep double descent". المقال يشرح كيف أنه في بعض الموديلات كيما CNNs و ResNets و Transformers، الأداء يبدى يتحسن، بعدين يطيح، ومن بعد يرجع يتحسن مرة أخرى مع زيادة حجم النموذج أو البيانات أو وقت التدريب. يعني كأننا في rollercoaster، رايحين جاين! 😄 شخصياً، هذا الشيء يعلمني أنه في البحث، لازم نكون مستعدين للمفاجآت، كيما في الحياتنا. أحيانا، كي تظن أن الأمور رايحة تسوء، يجيك حل غير متوقع يبدل كل شيء! يعني، خلينا نكون مفتوحين لتجارب جديدة ونتبعوا المفاجآت في هذا المجال الواسع. https://openai.com/index/deep-double-descent #AI #DeepLearning #Research #Algorithmes #Innovation
OPENAI.COM
Deep double descent
We show that the double descent phenomenon occurs in CNNs, ResNets, and transformers: performance first improves, then gets worse, and then improves again with increasing model size, data size, or training time. This effect is often avoided through c
Like
Love
Wow
Angry
Sad
298
1 Comments
ollo https://www.ollo.ws