auto-sklearn是一个强大的开源自动化机器学习框架,构建在python中最著名的机器学习库之一scikit-learn之上。它通过贝叶斯优化和元学习,在给定数据集上自动搜索潜在的机器学习流水线,并自动识别最佳模型和超参数。本教程将介绍在python中使用auto-sklearn的用法,包括安装、导入数据、数据准备、创建和训练模型以及评估模型效果的指导。即使是初学者也可以使用auto-sklearn快速简单地创建强大的机器学习模型。
在node-red中处理错误的方法auto-sklearn使用高效的开源软件程序auto-sklearn自动化创建和持续改进机器学习模型。使用贝叶斯优化和元学习自动找到特定数据集的理想模型和超参数,这本身是基于著名的机器学习程序scikit-learn的。
只有少数几个autosklearn为分类和回归问题创建的应用程序包括自然语言处理、图片分类和时间序列预测。
该库通过对潜在的机器学习流程集合进行搜索来运行,其中包括特征工程、模型选择和数据准备过程。它使用贝叶斯优化有效地搜索这个空间,并通过元学习从先前的测试中不断提高搜索效率。
此外,auto-sklearn还提供了一系列强大的功能,包括动态集成选择、自动模型集成和主动学习。此外,它还提供了简单易用的api,用于开发、测试和训练模型。
automl 代码让我们现在使用auto-sklearn更详细地检查automl代码。我们将使用scikit-learn中的数字数据集,这是一个手写数字的数据集。预测从数字图片中的数字是目标。这是代码 -
program的中文翻译为:程序import autosklearn.classificationfrom sklearn.datasets import load_digitsfrom sklearn.model_selection import train_test_split# load the datasetx, y = load_digits(return_x_y=true)x_train, x_test, y_train, y_test = train_test_split(x, y, random_state=1)# create and fit the automl modelautoml = autosklearn.classification.autosklearnclassifier(time_left_for_this_task=180, per_run_time_limit=30)automl.fit(x_train, y_train)# evaluate the model on the test setprint(accuracy:, automl.score(x_test, y_test))
输出accuracy: 0.9866666666666667
代码解释这个程序使用自动化机器学习(automl)从mnist数据集中对手写数字进行分类,其中包括使用auto-sklearn模块。以下是代码的简要概述−
从autosklearn.classification模块导入autosklearnclassifier类,该类包含将被使用的automl分类模型,导入autosklearn.classification模块。
从sklearn.datasets导入load_digits函数:这将从sklearn.datasets包中导入mnist数据集的load_digits函数。
从sklearn中选择模型。mnist数据集使用sklearn.model selection模块中的train test split函数分为训练集和测试集,这里进行了导入。
加载了mnist数据集,输入特征存储在x中,相应的标签存储在y中。x, y = load_digits(return_x_y=true):这将加载mnist数据集。
x训练集、x测试集、y训练集、y测试集 = train_test_split(x, y, random_state=1)
将数据集按照75:25的比例划分为训练集和测试集,并将随机种子设置为1以确保可重复性automl等同于autosklearn.classification。autosklearnclassifier(每次运行时间限制=30,此任务剩余时间=180):将在mnist数据集上训练的automl模型形成为autosklearnclassifier类的实例。每次运行时间限制表示每个单独模型可以运行的最长时间(以秒为单位),而此任务的剩余时间表示automl过程可以运行的最长时间(以秒为单位)。
使用 automl.fit 函数(x train, y train),通过训练集 x train 和相关标签 y train 训练 autosklearnclassifier 模型。
accuracy:, print(x test, y test), automl.score 这确定了autosklearnclassifier模型在评估其在x test和y test相关标签上的性能后,在测试集上的准确性。score方法给出了模型在给定数据集上的准确性。
上述代码实现了automl方法,这是一种机器学习技术,可以自动化模型构建过程的每一步,包括特征选择、超参数调整和数据准备。即使是非专家也可以借助automl创建强大的模型,这减少了创建机器学习模型所需的人工工作量。
首先,将所需的库,如pandas,numpy,sklearn和tpot,导入到代码中。sklearn用于机器学习任务,如数据预处理、模型选择和评估,pandas用于数据操作,numpy用于数值计算。实现automl算法的主要库是tpot。
然后使用pandas的read_csv函数加载数据集,并将输入特征和输出标签分开存储在不同的变量中。'y'变量保存输出的标签,而'x'变量存储输入的特征。
为了适应数据并生成机器学习模型,代码首先加载数据集,然后创建tpotregressor类的一个实例。tpotregressor类是tpotbase类的一个子类,使用遗传算法选择特征和调整超参数。tpotregressor类处理回归问题,而tpotclassifier类处理分类问题。
使用sklearn的train-test-split方法将数据集分为训练集和测试集。这是机器学习中常见的做法,将数据分为两个集合:一个用于拟合模型的训练集,一个用于评估模型性能的测试集。
一旦数据被分割,tpotregressor实例的fit方法被调用,该方法会根据训练数据调整模型。通过fit技术,使用遗传算法找到给定数据的最佳特征子集和超参数。然后将最佳模型返回。
然后,通过使用评分方法,代码对模型在测试集上的性能进行评估,以确定模型的准确性。准确性得分表示模型与数据的拟合程度,值越接近1表示拟合程度越好。
最佳模型随后使用导出函数导出到一个python文件中,同时附带其在测试集上的准确度得分。
结论总之,auto-sklearn是一个强大的库,可以简化机器学习模型的创建和改进过程。通过自动寻找给定数据集的最佳模型和超参数,它可以节省时间和精力。本教程介绍了如何在python中使用auto-sklearn,包括安装它、导入数据、准备数据、创建和训练模型以及评估模型性能的指导。即使是新手也可以使用auto-sklearn快速简单地创建强大的机器学习模型。
以上就是自动机器学习python等效代码解释的详细内容。