Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
- Seiten
- 18
- Định dạng
- Dung lượng
- 499 KB
- Năm
- 2018
- Trường
- University Wisconsin-Madison
- Aufrufe
- 0
- Kommentare
- 0
- Lượt tải
- 0
Vorschau wird generiert...
Bài giảng số 11 của khóa học STAT 479: Machine Learning tại Đại học Wisconsin-Madison, trình bày các kiểm định thống kê và so sánh thuật toán như kiểm định tỷ lệ, McNemar, F-test, t-test, nested cross-validation và đánh giá mô hình.
- Dokumentenname
- Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
- Schule / Kurs
- University Wisconsin-Madison · Machine learning
- Inhalt
- Tài liệu giới thiệu các phương pháp kiểm định thống kê để so sánh hiệu suất mô hình học máy, bao gồm các kỹ thuật dựa trên tập kiểm tra độc lập và kiểm định chéo. Tài liệu cũng đề cập đến kiểm định chéo lồng nhau và đưa ra các gợi ý về đánh giá mô hình.
- Inhaltsverzeichnis
- 11 Statistical Tests and Algorithm Comparison
- 11.1 Overview
- 11.2 Testing the Difference of Proportions
- 11.3 Comparing Two Models with the McNemar Test
- 11.4 Exact p-Values via the Binomial Test
- 11.5 Multiple Hypotheses Testing
- 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers
- 11.7 The F -test for Comparing Multiple Classifiers
- 11.8 Comparing Algorithms
- 11.9 Resampled Paired t-Test
- 11.10k-fold Cross-validated Paired t-Test
- 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test
- 11.12Alpaydin’s Combined 5x2cv F -test
- 11.13Effect size
- 11.14Nested Cross-Validation
- 11.15Conclusions
- Seiten
- 18 Seiten
- Hochgeladen von
- Uni24h
Beschreibung
Trích nội dung tài liệu
STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 Contents 11 Statistical Tests and Algorithm Comparison 1 11.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 11.2 Testing the Difference of Proportions . . . . . . . . . . . . . . . . . . . . . . . 1 11.3 Comparing Two Models with the McNemar Test . . . . . . . . . . . . . . . . 3 11.4 Exact p-Values via the Binomial Test . . . . . . . . . . . . . . . . . . . . . . . 5 11.5 Multiple Hypotheses Testing . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers . . . 7 11.7 The F -test for Comparing Multiple Classifiers . . . . . . . . . . . . . . . . . . 10 11.8 Comparing Algorithms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11 11.9 Resampled Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12 11.10k-fold Cross-validated Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . 13 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test . . . . . . . . . . . . . . . 13 11.12Alpaydin’s Combined 5x2cv F -test . . . . . . . . . . . . . . . . . . . . . . . . 14 11.13Effect size . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.14Nested Cross-Validation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.15Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15 STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 11 Statistical Tests and Algorithm Comparison 11.1 Overview This fourth lecture in the model evaluation part of this machine learning class provides overviews of several statistical hypothesis testin
Häufig gestellte Fragen
Ist dieses Dokument kostenlos?
Ja. „Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka“ ist kostenlos — melden Sie sich einfach an und klicken Sie auf Herunterladen, um die Originaldatei zu erhalten.
Wie viele Seiten hat dieses Dokument?
Das Dokument hat 18 Seiten, für den Kurs Machine learning. Sie können es vor dem Herunterladen online in der Vorschau ansehen.
Kann ich vor dem Herunterladen eine Vorschau ansehen?
Ja. Sie können sich dieses Dokument direkt auf dieser Seite im Online-Reader ansehen und dann entscheiden, ob Sie es herunterladen möchten.
Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
Vorschau wird generiert...
Trích nội dung tài liệu
STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 Contents 11 Statistical Tests and Algorithm Comparison 1 11.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 11.2 Testing the Difference of Proportions . . . . . . . . . . . . . . . . . . . . . . . 1 11.3 Comparing Two Models with the McNemar Test . . . . . . . . . . . . . . . . 3 11.4 Exact p-Values via the Binomial Test . . . . . . . . . . . . . . . . . . . . . . . 5 11.5 Multiple Hypotheses Testing . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers . . . 7 11.7 The F -test for Comparing Multiple Classifiers . . . . . . . . . . . . . . . . . . 10 11.8 Comparing Algorithms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11 11.9 Resampled Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12 11.10k-fold Cross-validated Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . 13 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test . . . . . . . . . . . . . . . 13 11.12Alpaydin’s Combined 5x2cv F -test . . . . . . . . . . . . . . . . . . . . . . . . 14 11.13Effect size . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.14Nested Cross-Validation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.15Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15 STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 11 Statistical Tests and Algorithm Comparison 11.1 Overview This fourth lecture in the model evaluation part of this machine learning class provides overviews of several statistical hypothesis testin
- Dokumentenname
- Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
- Schule / Kurs
- University Wisconsin-Madison · Machine learning
- Inhalt
- Tài liệu giới thiệu các phương pháp kiểm định thống kê để so sánh hiệu suất mô hình học máy, bao gồm các kỹ thuật dựa trên tập kiểm tra độc lập và kiểm định chéo. Tài liệu cũng đề cập đến kiểm định chéo lồng nhau và đưa ra các gợi ý về đánh giá mô hình.
- Inhaltsverzeichnis
- 11 Statistical Tests and Algorithm Comparison
- 11.1 Overview
- 11.2 Testing the Difference of Proportions
- 11.3 Comparing Two Models with the McNemar Test
- 11.4 Exact p-Values via the Binomial Test
- 11.5 Multiple Hypotheses Testing
- 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers
- 11.7 The F -test for Comparing Multiple Classifiers
- 11.8 Comparing Algorithms
- 11.9 Resampled Paired t-Test
- 11.10k-fold Cross-validated Paired t-Test
- 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test
- 11.12Alpaydin’s Combined 5x2cv F -test
- 11.13Effect size
- 11.14Nested Cross-Validation
- 11.15Conclusions
- Seiten
- 18 Seiten
- Hochgeladen von
- Uni24h
Kommentare (0)
Noch keine Kommentare. Seien Sie der Erste!
Refresher probabilities statistics (Xác suất và thống kê cho Machine Learning) - Afshine Amidi and Shervine Amidi
Refresher algebra calculus (Đại số tuyến tính và Giải tích phục vụ Machine learning) - Afshine Amidi and Shervine Amidi
Cheatsheet supervised learning (Khái niệm cơ bản trong học có giám sát) - Afshine Amidi and Shervine Amidi
Cheatsheet Deep Learning (Khái niệm chính về học sâu) - Afshine Amidi and Shervine Amidi
Machine learning tips and tricks (Tổng hợp mẹo về học máy)
Tổng hợp Đề Toán 5 - Luyện thi vào Lớp 6 - CLB EMath
Bài giảng vật lý đại cương (Chương 3) - Đỗ Ngọc Uấn
Chương 8.Nguyên tử - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 7.Cơ học lượng tử - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 6.Quang học lượng tử - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Kommentare (0)
Noch keine Kommentare. Seien Sie der Erste!