البحث عن المعاملات الفائقة دون فرط التخصيص

الموضع في المسارالوحدة 3 من 4 · الموضوع 6 من 6

3.6 البحث عن المعاملات الفائقة دون فرط التخصيص

—درجة المختبر— / 100إجمالي XP—التتابع—

فائز البحث مجمَّل

يجرّب البحث عن المعاملات الفائقة إعدادات كثيرة ويقيّم كلًا منها على بيانات التحقق ويحتفظ بالأفضل. والمشكلة أن أفضل درجة بين درجات كثيرة مشوشة متحيزة إلى الأعلى حتى لو لم يكن لأي إعداد مهارة. فإذا كان لـ $N$ إعدادًا درجة ضجيج خالص بانحراف معياري $\sigma$ فالأفضل المتوقع نحو $\sigma\times z_N$ حيث $z_{10}=1.54$ و $z_{100}=2.51$ . وبضجيج IC قدره $\sigma=0.02$ يبدو فائز $100$ إعداد عديم الفائدة كأنه $0.050$ أي إشارة محترمة غير موجودة. فإعلان درجة التحقق للفائز كأنها أداؤه متفائل وكلما جرّبت إعدادات أكثر ساء الأمر.

E\left[\max_{i\le N}s_i\right]\approx\sigma\,z_N,\qquad z_{10}=1.54,\quad z_{100}=2.51;\qquad K\cdot C,\qquad K_{o}\,(K_{i}C+1)

(1)

هناك ثلاثة علاجات أمينة. الأول الاحتفاظ بمجموعة اختبار لا يراها البحث أبدًا والإعلان عن درجتها وحدها. والثاني التحقق المتقاطع المتداخل: حلقة خارجية تعزل طية اختبار وداخل كل مجموعة تدريب خارجية حلقة داخلية تجري البحث. فتقيس الدرجات الخارجية الإجراء كله بما فيه البحث. والثالث تقليص البحث: إعدادات أقل وشبكات أخشن وإعدادات مؤثرة. وبـ $K_o$ طية خارجية و $K_i$ داخلية و $C$ مرشحًا يحتاج التحقق المتداخل إلى $K_o(K_iC+1)$ ملاءمة فخطط لميزانيته. وقبل أن تبحث اسأل هل يمكن للإعداد أن يهم أصلًا.

العدّ وشبكة حقيقيةعشرون مرشحًا بـ

5

طيات تكلف

100

ملاءمة زائد إعادة ملاءمة أخيرة. والتحقق المتداخل بـ

5

طيات خارجية و

3

داخلية و

20

مرشحًا يكلف

5\times(3\times20+1)=305

ملاءمة. ويُتوقع أفضل

100

إعداد عديم الفائدة عند

2.51\times0.02=0.050

وأفضل

10

عند

1.54\times0.02=0.031

. وإذا نال فائزك

0.060

فلا يبقى لتفسيره إلا

0.060-0.050=0.010

. وعلى اللوحة الشهرية الحقيقية للأسهم لا شيء في ridge يُضبط: معامل المعلومات

0.033

لكل

\alpha

من

0.01

إلى

10^{4}

. وخمسة أعماق للشجرة من

1

إلى

10

تعطي IC بين

-0.010

0.013

وأفضلها

0.013

يبعد نحو خطأ معياري واحد (

0.21/\sqrt{257}=0.013

) عن الصفر.

أكبر قيمة للضجيج ليست ضجيجًا: أفضل إعداد بين إعدادات كثيرة عديمة الفائدة يبدو مهارة.
التحقق المتداخل يقيّم الإجراء كله بما فيه البحث بـ $K_o(K_iC+1)$ ملاءمة.
قارن بالضجيج: مكسب أقل من خطأ معياري واحد ليس اكتشافًا.

المختبر: ما الذي يُقيَّم

أفضل 100 إعداد عديم الفائدة15 نقطة
أفضل 1010 نقطة
ملاءمات بحث الشبكة10 نقطة
ملاءمات التحقق المتداخل15 نقطة
ما يبقى لتفسيره10 نقطة
أي بحث أمين10 نقطة
التحقق المتداخل10 نقطة
لماذا درجة الفائز مضخمة20 نقطة

0/ 8 تمت الإجابة

1إجابة رقمية15 نقطةبلا إجابة

لكل من $100$ إعداد عديم الفائدة IC بضجيج انحرافه المعياري $0.02$ . والأفضل المتوقع هو $\sigma z_N$ بـ $z_{100}=2.51$ . كم هو؟ أعطه بثلاث خانات عشرية.

m =

المقبول: ± 0.001

2إجابة رقمية10 نقطةبلا إجابة

بـ $N=10$ إعدادات عديمة الفائدة فقط، $z_{10}=1.54$ و $\sigma=0.02$ . ما IC المتوقع للأفضل؟ أعطه بثلاث خانات عشرية.

m =

المقبول: ± 0.001

3إجابة رقمية10 نقطةبلا إجابة

يجرّب بحث الشبكة $C=20$ مرشحًا بـ $K=5$ طيات لكل منها. كم ملاءمة يجري دون عدّ إعادة الملاءمة الأخيرة؟

n =

المقبول: ± 0.01

4إجابة رقمية15 نقطةبلا إجابة

للتحقق المتداخل $K_o=5$ طيات خارجية و $K_i=3$ داخلية و $C=20$ مرشحًا زائد إعادة ملاءمة لكل طية خارجية. كم ملاءمة تلزم $K_o(K_iC+1)$ ؟

n =

المقبول: ± 0.01

5إجابة رقمية10 نقطةبلا إجابة

يبلغ IC فائزك $0.060$ والأفضل المتوقع بين $100$ إعداد عديم الفائدة $0.050$ . كم من الدرجة يزيد عما يعطيه الحظ وحده؟ أعطه بثلاث خانات عشرية.

x =

المقبول: ± 0.001

6اختيار10 نقطةبلا إجابة

أي إجراء يعطي تقديرًا أمينًا لأداء النموذج المضبوط على بيانات جديدة؟

7رتّب الخطوات10 نقطةبلا إجابة

رتّب خطوات التحقق المتقاطع المتداخل.

اسحب لإعادة الترتيب، أو ركّز على عنصر واضغط مسافة لرفعه والأسهم لتحريكه ومسافة لإفلاته.

1قيّم النموذج المعاد ملاءمته على طية الاختبار الخارجية
2اعزل طية اختبار خارجية
3أعد ملاءمة أفضل إعداد على كامل مجموعة التدريب الخارجية
4ابحث عن الإعدادات بتحقق متقاطع داخلي على بيانات التدريب الخارجية

8اشرح بكلماتك20 نقطةبلا إجابة

في جملة أو جملتين اشرح لماذا تبالغ أفضل درجة تحقق يجدها بحث كبير عن المعاملات الفائقة في تقدير أداء النموذج على بيانات جديدة.

يُقيَّم على:درجة كل إعداد تتضمن حظًا واختيار الأعلى بين درجات كثيرة مشوشة ينتقي الأحظهذا الحظ لن يتكرر على بيانات جديدة فالأداء الحقيقي أقل0 / 400 حرف

وضع الرياضياتإدخال بلوحة المفاتيح أو LaTeXالمهمة 1 من 8 · Ctrl ⏎ للتحقق

البحث عن المعاملات الفائقة دون فرط التخصيص

الموضع في المسارالوحدة 3 من 4 · الموضوع 6 من 6

3.6 البحث عن المعاملات الفائقة دون فرط التخصيص

—درجة المختبر— / 100إجمالي XP—التتابع—

فائز البحث مجمَّل

E\left[\max_{i\le N}s_i\right]\approx\sigma\,z_N,\qquad z_{10}=1.54,\quad z_{100}=2.51;\qquad K\cdot C,\qquad K_{o}\,(K_{i}C+1)

(1)

العدّ وشبكة حقيقيةعشرون مرشحًا بـ

5

طيات تكلف

100

ملاءمة زائد إعادة ملاءمة أخيرة. والتحقق المتداخل بـ

5

طيات خارجية و

3

داخلية و

20

مرشحًا يكلف

5\times(3\times20+1)=305

ملاءمة. ويُتوقع أفضل

100

إعداد عديم الفائدة عند

2.51\times0.02=0.050

وأفضل

10

عند

1.54\times0.02=0.031

. وإذا نال فائزك

0.060

فلا يبقى لتفسيره إلا

0.060-0.050=0.010

. وعلى اللوحة الشهرية الحقيقية للأسهم لا شيء في ridge يُضبط: معامل المعلومات

0.033

لكل

\alpha

من

0.01

إلى

10^{4}

. وخمسة أعماق للشجرة من

1

إلى

10

تعطي IC بين

-0.010

0.013

وأفضلها

0.013

يبعد نحو خطأ معياري واحد (

0.21/\sqrt{257}=0.013

) عن الصفر.

أكبر قيمة للضجيج ليست ضجيجًا: أفضل إعداد بين إعدادات كثيرة عديمة الفائدة يبدو مهارة.
التحقق المتداخل يقيّم الإجراء كله بما فيه البحث بـ $K_o(K_iC+1)$ ملاءمة.
قارن بالضجيج: مكسب أقل من خطأ معياري واحد ليس اكتشافًا.

المختبر: ما الذي يُقيَّم

أفضل 100 إعداد عديم الفائدة15 نقطة
أفضل 1010 نقطة
ملاءمات بحث الشبكة10 نقطة
ملاءمات التحقق المتداخل15 نقطة
ما يبقى لتفسيره10 نقطة
أي بحث أمين10 نقطة
التحقق المتداخل10 نقطة
لماذا درجة الفائز مضخمة20 نقطة

0/ 8 تمت الإجابة

1إجابة رقمية15 نقطةبلا إجابة

m =

المقبول: ± 0.001

2إجابة رقمية10 نقطةبلا إجابة

بـ $N=10$ إعدادات عديمة الفائدة فقط، $z_{10}=1.54$ و $\sigma=0.02$ . ما IC المتوقع للأفضل؟ أعطه بثلاث خانات عشرية.

m =

المقبول: ± 0.001

3إجابة رقمية10 نقطةبلا إجابة

يجرّب بحث الشبكة $C=20$ مرشحًا بـ $K=5$ طيات لكل منها. كم ملاءمة يجري دون عدّ إعادة الملاءمة الأخيرة؟

n =

المقبول: ± 0.01

4إجابة رقمية15 نقطةبلا إجابة

n =

المقبول: ± 0.01

5إجابة رقمية10 نقطةبلا إجابة

x =

المقبول: ± 0.001

6اختيار10 نقطةبلا إجابة

أي إجراء يعطي تقديرًا أمينًا لأداء النموذج المضبوط على بيانات جديدة؟

7رتّب الخطوات10 نقطةبلا إجابة

رتّب خطوات التحقق المتقاطع المتداخل.

اسحب لإعادة الترتيب، أو ركّز على عنصر واضغط مسافة لرفعه والأسهم لتحريكه ومسافة لإفلاته.

1قيّم النموذج المعاد ملاءمته على طية الاختبار الخارجية
2اعزل طية اختبار خارجية
3أعد ملاءمة أفضل إعداد على كامل مجموعة التدريب الخارجية
4ابحث عن الإعدادات بتحقق متقاطع داخلي على بيانات التدريب الخارجية

8اشرح بكلماتك20 نقطةبلا إجابة

وضع الرياضياتإدخال بلوحة المفاتيح أو LaTeXالمهمة 1 من 8 · Ctrl ⏎ للتحقق

البحث عن المعاملات الفائقة دون فرط التخصيص

فائز البحث مجمَّل

المختبر: ما الذي يُقيَّم

سجّل الدخول لتشغيل الكود الخاص بك.

البحث عن المعاملات الفائقة دون فرط التخصيص

فائز البحث مجمَّل

المختبر: ما الذي يُقيَّم

سجّل الدخول لتشغيل الكود الخاص بك.