نحوه استفاده
- یک نمره، جفت برچسب در هر خط بچسبانید. وقتی مدل به خوبی کار می کند، نمرات باید مثبت بالاتر از منفی باشد.
- اگر برچسبهای شما از مقادیری مانند مشخص نیست، به صورت اختیاری، برچسب مثبت را به صراحت تنظیم کنید
1یاcase. - AUC را برای رتبهبندی کیفیت بخوانید، سپس جدول آستانه و منحنی ROC را برای انتخاب یک برش عملیاتی عملی بررسی کنید.
رتبه بندی امتیاز باینری به ROC و AUC
این نسخه اول فقط باینری و فقط امتیاز دارد. از آن قبل از منحنیهای فراخوان دقیق یا نمودارهای کالیبراسیون استفاده کنید، زمانی که سؤال اصلی ترتیب امتیاز و معاوضه آستانه است.
ورودی ها
امتیاز را جایگذاری کنید، ردیفها را برچسب بزنید و محاسبه را برای بررسی مبادلات ROC اجرا کنید.
منحنی ROC
برای بررسی منحنی ROC، ماشین حساب را اجرا کنید. نمودار را متمرکز کنید و از ← / → برای حرکت در آستانه ها استفاده کنید.
جدول آستانه
جدول اولین ردیف های آستانه را از مرور امتیاز فهرست می کند. آستانه های پایین تر معمولا حساسیت را افزایش می دهند و ویژگی را کاهش می دهند.
| آستانه ≥ | حساسیت | خاص بودن | FPR | TP | FP | TN | FN |
|---|
نحوه خواندن ROC AUC
ROC AUC می پرسد که امتیاز در همه آستانه ها تا چه حد امتیازات مثبت را بالاتر از منفی قرار می دهد. مقدار نزدیک به 0.5 به این معنی است که ترتیب به تصادف نزدیک است. مقدار بالاتر به این معنی است که مثبت ها تمایل به دریافت نمرات بالاتر از منفی دارند.
آستانه ها هنوز مهم هستند
AUC بالا، بریدگی عملیاتی را برای شما انتخاب نمی کند. آستانه مناسب بستگی به این دارد که چه چیزی در گردش کار شما آسیب بیشتری می زند: مثبت کاذب، منفی کاذب، یا تاخیر ناشی از حجم بررسی.
ماتریس سردرگمی در مقابل ROC AUC
استفاده کنید ماتریس سردرگمی زمانی که آستانه از قبل ثابت شده است و به یک عکس فوری عملیاتی نیاز دارید. از ROC AUC زمانی استفاده کنید که آستانه هنوز باز است و قبل از تصمیم گیری باید کل sweep را با هم مقایسه کنید.
سوالات متداول
تفاوت ROC AUC با ماتریس سردرگمی چیست؟
یک ماتریس سردرگمی یک آستانه انتخاب شده را توصیف می کند. ROC AUC توضیح میدهد که چگونه حساسیت و ویژگی در آستانههای زیادی با هم عوض میشوند، بنابراین به شما میگوید که قبل از اینکه به یک برش عملیاتی متعهد شوید، امتیازات تا چه حد امتیازات مثبت را بالاتر از منفی قرار میدهند.
وقتی آستانه را جابجا می کنم چه چیزی تغییر می کند؟
آستانه های پایین تر موارد بیشتری را به عنوان مثبت طبقه بندی می کنند که معمولا حساسیت را افزایش می دهد و ویژگی را کاهش می دهد. آستانه های بالاتر برعکس را انجام می دهند. جدول آستانه به شما امکان می دهد ردیف به ردیف آن مبادله را بررسی کنید.
آیا یک AUC بالا به طور خودکار به من می گوید که از کدام آستانه استفاده کنم؟
خیر. AUC کیفیت رتبهبندی را در بین آستانهها خلاصه میکند، اما آستانه عملیاتی همچنان به هزینه موارد مثبت کاذب در مقابل منفیهای کاذب، شیوع و محدودیتهای گردش کار بستگی دارد.
آیا این صفحه از ROC چند کلاسه پشتیبانی می کند؟
خیر. این نسخه اول عمداً به طبقهبندی باینری محدود شده است، بنابراین ترتیب امتیاز، منحنی ROC و جدول آستانه به راحتی قابل بررسی هستند.
مرتبط
نظرات (اختیاری)
برای کاهش بار، نظرات فقط در صورت نیاز واکشی می شوند.