机器学习理论导引 (周志华 王魏 高尉 张利军)

基础概念： 介绍机器学习的基本概念，包括监督学习、无监督学习、半监督学习和强化学习等。

模型和算法： 对常见的机器学习模型和算法进行详细介绍，例如决策树、支持向量机、神经网络、聚类算法等。

性能度量： 讨论评估和比较机器学习模型性能的指标，例如准确度、精确度、召回率、F1分数等。

泛化理论： 探讨模型泛化能力的理论基础，包括过拟合、欠拟合、交叉验证等。

优化方法： 讨论在训练机器学习模型时使用的优化算法，例如梯度下降法、随机梯度下降法等。

统计学习理论： 探讨统计学习的基本原理，包括VC维、不等式等，以及如何应用这些理论来理解学习算法的性能。

核方法： 研究使用核函数的方法，如支持向量机和核主成分分析。

深度学习： 对深度学习的基本原理、神经网络结构和训练方法进行详细介绍。

集成学习： 研究如何将多个模型集成为一个更强大的模型，如随机森林、梯度提升机等。

特征工程： 讨论如何选择和处理输入数据的特征，以提高模型性能。

应用和案例研究： 展示机器学习在不同领域的实际应用，并提供案例研究。