Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
正在生成预览...
Bài giảng số 11 của khóa học STAT 479: Machine Learning tại Đại học Wisconsin-Madison, trình bày các kiểm định thống kê và so sánh thuật toán như kiểm định tỷ lệ, McNemar, F-test, t-test, nested cross-validation và đánh giá mô hình.
描述
STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 Contents 11 Statistical Tests and Algorithm Comparison 1 11.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 11.2 Testing the Difference of Proportions . . . . . . . . . . . . . . . . . . . . . . . 1 11.3 Comparing Two Models with the McNemar Test . . . . . . . . . . . . . . . . 3 11.4 Exact p-Values via the Binomial Test . . . . . . . . . . . . . . . . . . . . . . . 5 11.5 Multiple Hypotheses Testing . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers . . . 7 11.7 The F -test for Comparing Multiple Classifiers . . . . . . . . . . . . . . . . . . 10 11.8 Comparing Algorithms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11 11.9 Resampled Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12 11.10k-fold Cross-validated Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . 13 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test . . . . . . . . . . . . . . . 13 11.12Alpaydin’s Combined 5x2cv F -test . . . . . . . . . . . . . . . . . . . . . . . . 14 11.13Effect size . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.14Nested Cross-Validation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.15Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15 STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 11 Statistical Tests and Algorithm Comparison 11.1 Overview This fourth lecture in the model evaluation part of this machine learning class provides overviews of several statistical hypothesis testin
AI 摘要
- 文档名称
- Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
- 学校 / 课程
- University Wisconsin-Madison · Machine learning
- 内容
- Tài liệu giới thiệu các phương pháp kiểm định thống kê để so sánh hiệu suất mô hình học máy, bao gồm các kỹ thuật dựa trên tập kiểm tra độc lập và kiểm định chéo. Tài liệu cũng đề cập đến kiểm định chéo lồng nhau và đưa ra các gợi ý về đánh giá mô hình.
- 目录
- 11 Statistical Tests and Algorithm Comparison
- 11.1 Overview
- 11.2 Testing the Difference of Proportions
- 11.3 Comparing Two Models with the McNemar Test
- 11.4 Exact p-Values via the Binomial Test
- 11.5 Multiple Hypotheses Testing
- 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers
- 11.7 The F -test for Comparing Multiple Classifiers
- 11.8 Comparing Algorithms
- 11.9 Resampled Paired t-Test
- 11.10k-fold Cross-validated Paired t-Test
- 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test
- 11.12Alpaydin’s Combined 5x2cv F -test
- 11.13Effect size
- 11.14Nested Cross-Validation
- 11.15Conclusions
- 页数
- 18 页
- 上传者
- Uni24h
常见问题
此文档免费吗？
是的。“Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka”是免费的 — 只需登录并点击“下载”即可获取原始文件。
这份文档有多少页？
该文档共有 18 页，适用于课程 Machine learning。您可以在下载前进行在线预览。
我可以在下载前预览吗？
是的。您可以通过在线阅读器直接在本页面预览此文档，然后再决定是否下载。
Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
正在生成预览...
STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 Contents 11 Statistical Tests and Algorithm Comparison 1 11.1 Overview . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1 11.2 Testing the Difference of Proportions . . . . . . . . . . . . . . . . . . . . . . . 1 11.3 Comparing Two Models with the McNemar Test . . . . . . . . . . . . . . . . 3 11.4 Exact p-Values via the Binomial Test . . . . . . . . . . . . . . . . . . . . . . . 5 11.5 Multiple Hypotheses Testing . . . . . . . . . . . . . . . . . . . . . . . . . . . 6 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers . . . 7 11.7 The F -test for Comparing Multiple Classifiers . . . . . . . . . . . . . . . . . . 10 11.8 Comparing Algorithms . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11 11.9 Resampled Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12 11.10k-fold Cross-validated Paired t-Test . . . . . . . . . . . . . . . . . . . . . . . . 13 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test . . . . . . . . . . . . . . . 13 11.12Alpaydin’s Combined 5x2cv F -test . . . . . . . . . . . . . . . . . . . . . . . . 14 11.13Effect size . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.14Nested Cross-Validation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14 11.15Conclusions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 15 STAT 479: Machine Learning Lecture Notes Sebastian Raschka Department of Statistics University of Wisconsin–Madison http://stat.wisc.edu/∼sraschka/teaching/stat479-fs2018/ Fall 2018 11 Statistical Tests and Algorithm Comparison 11.1 Overview This fourth lecture in the model evaluation part of this machine learning class provides overviews of several statistical hypothesis testin
阅读全文
- 文档名称
- Eval algo notes (11) (Các kiểm định thống kê và so sánh thuật toán) - Sebastian Raschka
- 学校 / 课程
- University Wisconsin-Madison · Machine learning
- 内容
- Tài liệu giới thiệu các phương pháp kiểm định thống kê để so sánh hiệu suất mô hình học máy, bao gồm các kỹ thuật dựa trên tập kiểm tra độc lập và kiểm định chéo. Tài liệu cũng đề cập đến kiểm định chéo lồng nhau và đưa ra các gợi ý về đánh giá mô hình.
- 目录
- 11 Statistical Tests and Algorithm Comparison
- 11.1 Overview
- 11.2 Testing the Difference of Proportions
- 11.3 Comparing Two Models with the McNemar Test
- 11.4 Exact p-Values via the Binomial Test
- 11.5 Multiple Hypotheses Testing
- 11.6 Cochran’s Q Test for Comparing the Performance of Multiple Classifiers
- 11.7 The F -test for Comparing Multiple Classifiers
- 11.8 Comparing Algorithms
- 11.9 Resampled Paired t-Test
- 11.10k-fold Cross-validated Paired t-Test
- 11.11Dietterich’s 5x2-Fold Cross-Validated Paired t-Test
- 11.12Alpaydin’s Combined 5x2cv F -test
- 11.13Effect size
- 11.14Nested Cross-Validation
- 11.15Conclusions
- 页数
- 18 页
- 上传者
- Uni24h
评论 (0)
暂无评论。快来抢沙发吧！
Refresher probabilities statistics (Xác suất và thống kê cho Machine Learning) - Afshine Amidi and Shervine Amidi
Ensembles notes (07) (Các phương pháp học ensemble) - Sebastian Raschka
Super cheatsheet machine learning (Khái niệm và công thức chính trong học máy) - Afshine Amidi and Shervine Amidi
Eval ci notes (09) (Đánh giá mô hình, khoảng tin cậy và kỹ thuật resampling) - Sebastian Raschka
Cheatsheet Deep Learning (Khái niệm chính về học sâu) - Afshine Amidi and Shervine Amidi
Chương 7.Cơ học lượng tử - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 6.Quang học lượng tử - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 5.Thuyết tương đối - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 4. Tán xạ ánh sáng - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
Chương 3.Phân cực ánh sáng - Vật lý đại cương 3 - TS.Nguyễn Thị Trang
评论 (0)
暂无评论。快来抢沙发吧！