机器学习是一个快速发展的领域,新的技术和算法不断涌现。然而,创建和增强机器学习模型可能是一项耗时且具有挑战性的任务,需要高度的专业知识。自动化机器学习,通常称为autoML,旨在通过自动化一些繁重的任务,如特征工程、超参数调整和模型选择,简化机器学习模型的创建和优化过程。
auto-sklearn是一个强大的开源自动化机器学习框架,构建在Python中最著名的机器学习库之一scikit-learn之上。它通过贝叶斯优化和元学习,在给定数据集上自动搜索潜在的机器学习流水线,并自动识别最佳模型和超参数。本教程将介绍在Python中使用Auto-sklearn的用法,包括安装、导入数据、数据准备、创建和训练模型以及评估模型效果的指导。即使是初学者也可以使用Auto-sklearn快速简单地创建强大的机器学习模型。
使用高效的开源软件程序Auto-sklearn自动化创建和持续改进机器学习模型。使用贝叶斯优化和元学习自动找到特定数据集的理想模型和超参数,这本身是基于著名的机器学习程序scikit-learn的。
只有少数几个autosklearn为分类和回归问题创建的应用程序包括自然语言处理、图片分类和时间序列预测。
该库通过对潜在的机器学习流程集合进行搜索来运行,其中包括特征工程、模型选择和数据准备过程。它使用贝叶斯优化有效地搜索这个空间,并通过元学习从先前的测试中不断提高搜索效率。
此外,Auto-sklearn还提供了一系列强大的功能,包括动态集成选择、自动模型集成和主动学习。此外,它还提供了简单易用的API,用于开发、测试和训练模型。
让我们现在使用Auto-sklearn更详细地检查AutoML代码。我们将使用scikit-learn中的数字数据集,这是一个手写数字的数据集。预测从数字图片中的数字是目标。这是代码 -
import autosklearn.classification from sklearn.datasets import load_digits from sklearn.model_selection import train_test_split # Load the dataset X, y = load_digits(return_X_y=True) X_train, X_test, y_train, y_test = train_test_split(X, y, random_state=1) # Create and fit the AutoML model automl = autosklearn.classification.AutoSklearnClassifier(time_left_for_this_task=180, per_run_time_limit=30) automl.fit(X_train, y_train) # Evaluate the model on the test set print("Accuracy:", automl.score(X_test, y_test))
Accuracy: 0.9866666666666667
这个程序使用自动化机器学习(AutoML)从MNIST数据集中对手写数字进行分类,其中包括使用Auto-sklearn模块。以下是代码的简要概述−
从autosklearn.classification模块导入AutoSklearnClassifier类,该类包含将被使用的AutoML分类模型,导入autosklearn.classification模块。
从sklearn.datasets导入load_digits函数:这将从sklearn.datasets包中导入MNIST数据集的load_digits函数。
从sklearn中选择模型。MNIST数据集使用sklearn.model selection模块中的train test split函数分为训练集和测试集,这里进行了导入。
加载了MNIST数据集,输入特征存储在X中,相应的标签存储在y中。X, y = load_digits(return_X_y=True):这将加载MNIST数据集。
X训练集、X测试集、y训练集、y测试集 = train_test_split(X, y, random_state=1)
Automl等同于autosklearn.classification。AutoSklearnClassifier(每次运行时间限制=30,此任务剩余时间=180):将在MNIST数据集上训练的AutoML模型形成为AutoSklearnClassifier类的实例。每次运行时间限制表示每个单独模型可以运行的最长时间(以秒为单位),而此任务的剩余时间表示AutoML过程可以运行的最长时间(以秒为单位)。
使用 automl.fit 函数(X train, y train),通过训练集 X train 和相关标签 Y train 训练 AutoSklearnClassifier 模型。
accuracy:", print(X test, y test), automl.score 这确定了AutoSklearnClassifier模型在评估其在X test和Y test相关标签上的性能后,在测试集上的准确性。score方法给出了模型在给定数据集上的准确性。
上述代码实现了AutoML方法,这是一种机器学习技术,可以自动化模型构建过程的每一步,包括特征选择、超参数调整和数据准备。即使是非专家也可以借助AutoML创建强大的模型,这减少了创建机器学习模型所需的人工工作量。
首先,将所需的库,如pandas,numpy,sklearn和tpot,导入到代码中。Sklearn用于机器学习任务,如数据预处理、模型选择和评估,Pandas用于数据操作,NumPy用于数值计算。实现AutoML算法的主要库是TPOT。
然后使用pandas的read_csv函数加载数据集,并将输入特征和输出标签分开存储在不同的变量中。'y'变量保存输出的标签,而'X'变量存储输入的特征。
为了适应数据并生成机器学习模型,代码首先加载数据集,然后创建TPOTRegressor类的一个实例。TPOTRegressor类是TPOTBase类的一个子类,使用遗传算法选择特征和调整超参数。TPOTRegressor类处理回归问题,而TPOTClassifier类处理分类问题。
使用Sklearn的train-test-split方法将数据集分为训练集和测试集。这是机器学习中常见的做法,将数据分为两个集合:一个用于拟合模型的训练集,一个用于评估模型性能的测试集。
一旦数据被分割,TPOTRegressor实例的fit方法被调用,该方法会根据训练数据调整模型。通过fit技术,使用遗传算法找到给定数据的最佳特征子集和超参数。然后将最佳模型返回。
然后,通过使用评分方法,代码对模型在测试集上的性能进行评估,以确定模型的准确性。准确性得分表示模型与数据的拟合程度,值越接近1表示拟合程度越好。
最佳模型随后使用导出函数导出到一个Python文件中,同时附带其在测试集上的准确度得分。
总之,Auto-sklearn是一个强大的库,可以简化机器学习模型的创建和改进过程。通过自动寻找给定数据集的最佳模型和超参数,它可以节省时间和精力。本教程介绍了如何在Python中使用Auto-sklearn,包括安装它、导入数据、准备数据、创建和训练模型以及评估模型性能的指导。即使是新手也可以使用Auto-sklearn快速简单地创建强大的机器学习模型。
以上是自动机器学习Python等效代码解释的详细内容。更多信息请关注PHP中文网其他相关文章!