BaggingClassifier#
- class sklearn.ensemble.BaggingClassifier(estimator=None, n_estimators=10, *, max_samples=1.0, max_features=1.0, bootstrap=True, bootstrap_features=False, oob_score=False, warm_start=False, n_jobs=None, random_state=None, verbose=0)[源代码]#
袋装分类器。
Bagging分类器是一个整体元估计器,它将每个基本分类器都与原始数据集的随机子集相匹配,然后汇总它们的单独预测(通过投票或平均)以形成最终预测。这样的元估计器通常可以用作减少黑匣子估计器方差的一种方式(例如,决策树),通过在其构建过程中引入随机化,然后从中创建一个集成。
该算法包含文献中的几部作品。当将数据集的随机子集绘制为样本的随机子集时,则该算法称为粘贴 [1]. 如果抽取样本并进行替换,则该方法称为装袋 [2]. 如果将数据集的随机子集绘制为要素的随机子集,则该方法称为随机子空间 [3]. 最后,当基础估计器建立在样本和特征的子集上时,则该方法称为随机补丁 [4].
阅读更多的 User Guide .
Added in version 0.15.
- 参数:
- estimator对象,默认=无
适合数据集随机子集的基本估计器。如果无,则基本估计器是
DecisionTreeClassifier
.Added in version 1.2:
base_estimator
更名为estimator
.- n_estimatorsint,默认值=10
集合中基本估计量的数量。
- max_samplesint或float,默认值为1.0
从X提取以训练每个基本估计器的样本数(默认情况下有替换,请参阅
bootstrap
了解更多详情)。如果是int,那么画
max_samples
样品如果是浮动的,那就画画
max_samples * X.shape[0]
样品
- max_featuresint或float,默认值为1.0
从X提取以训练每个基本估计器的特征数量(默认情况下不进行替换,请参阅
bootstrap_features
了解更多详情)。如果是int,那么画
max_features
功能.如果是浮动的,那就画画
max(1, int(max_features * n_features_in_))
功能.
- bootstrap布尔,默认=True
是否抽取样本并更换。如果为假,则执行不更换的抽样。
- bootstrap_features布尔,默认=假
是否使用替换绘制特征。
- oob_score布尔,默认=假
是否使用袋外样本来估计概括误差。仅当引导=True时才可用。
- warm_start布尔,默认=假
当设置为True时,重复使用上一次调用的解决方案来适应并向集合添加更多估计量,否则,只需适应全新的集合。看到 the Glossary .
Added in version 0.17: warm_start 构造函数参数。
- n_jobsint,默认=无
两者并行运行的作业数量
fit
和predict
.None
意思是1,除非在a中joblib.parallel_backend
上下文-1
意味着使用所有处理器。看到 Glossary 了解更多详细信息。- random_stateint,RandomState实例或无,默认=无
控制原始数据集的随机重新采样(样本和特征)。如果基本估计器接受
random_state
属性,则为集成中的每个实例生成不同的种子。传递int以获得跨多个函数调用的可重复输出。看到 Glossary .- verboseint,默认=0
控制匹配和预测时的详细程度。
- 属性:
- estimator_估计器
生成集合的基本估计器。
Added in version 1.2:
base_estimator_
更名为estimator_
.- n_features_in_int
期间看到的功能数量 fit .
Added in version 0.24.
- feature_names_in_ :nd形状数组 (
n_features_in_
,)nd数组形状( Names of features seen during fit. Defined only when
X
has feature names that are all strings.Added in version 1.0.
- estimators_估计者列表
适合的基本估计量的集合。
estimators_samples_
list of arrays为每个基本估计量绘制的样本的子集。
- estimators_features_list of arrays
每个基本估计器的绘制特征子集。
- classes_形状的nd数组(n_classes,)
班级标签。
- n_classes_int或list
班级的数量。
- oob_score_浮子
使用袋外估计获得的训练数据集分数。此属性仅存在于
oob_score
是真的- oob_decision_function_形状的nd数组(n_samples,n_classes)
使用训练集的袋外估计计算决策函数。如果n_estimators很小,那么在引导期间可能从未遗漏数据点。在这种情况下,
oob_decision_function_
可能含有NaN。此属性仅存在于oob_score
是真的
参见
BaggingRegressor
巴格回归者。
引用
[1]L. Breiman, "Pasting small votes for classification in large databases and on-line", Machine Learning, 36(1), 85-103, 1999.
[2]L. Breiman, "Bagging predictors", Machine Learning, 24(2), 123-140, 1996.
[3]T.何,“随机子空间方法构造决策森林”,模式分析与机器智能,20(8),832-844,1998年。
[4]G. Louppe and P. Geurts, "Ensembles on Random Patches", Machine Learning and Knowledge Discovery in Databases, 346-361, 2012.
示例
>>> from sklearn.svm import SVC >>> from sklearn.ensemble import BaggingClassifier >>> from sklearn.datasets import make_classification >>> X, y = make_classification(n_samples=100, n_features=4, ... n_informative=2, n_redundant=0, ... random_state=0, shuffle=False) >>> clf = BaggingClassifier(estimator=SVC(), ... n_estimators=10, random_state=0).fit(X, y) >>> clf.predict([[0, 0, 0, 0]]) array([1])
- decision_function(X)[源代码]#
基本分类器决策函数的平均值。
- 参数:
- X形状(n_samples,n_features)的{类数组,稀疏矩阵}
训练输入样本。只有当稀疏矩阵得到基估计器的支持时,稀疏矩阵才被接受。
- 返回:
- score形状的nd数组(n_samples,k)
输入样本的决策函数。这些列按排序顺序对应于类,因为它们出现在属性中
classes_
.回归和二元分类是特殊情况k == 1
否则k==n_classes
.
- fit(X, y, *, sample_weight=None, **fit_params)[源代码]#
根据训练集(X,y)构建估计器的Bagging集合。
- 参数:
- X形状(n_samples,n_features)的{类数组,稀疏矩阵}
训练输入样本。只有当稀疏矩阵得到基估计器的支持时,稀疏矩阵才被接受。
- y形状类似阵列(n_samples,)
The target values (class labels in classification, real numbers in regression).
- sample_weight形状类似数组(n_samples,),默认=无
样本重量。如果无,则样本的加权相等。请注意,只有基本估计器支持样本加权时才支持这一点。
- **fit_paramsdict
要传递给基础估计器的参数。
Added in version 1.5: 仅在以下情况下可用
enable_metadata_routing=True
,可以使用sklearn.set_config(enable_metadata_routing=True)
.看到 Metadata Routing User Guide 了解更多详细信息。
- 返回:
- self对象
拟合估计量。
- get_metadata_routing()[源代码]#
获取此对象的元数据路由。
请检查 User Guide 关于路由机制如何工作。
Added in version 1.5.
- 返回:
- routingMetadataRouter
A
MetadataRouter
封装路由信息。
- get_params(deep=True)[源代码]#
获取此估计器的参数。
- 参数:
- deep布尔,默认=True
如果为True,将返回此估计量和包含的作为估计量的子对象的参数。
- 返回:
- paramsdict
参数名称映射到其值。
- predict(X)[源代码]#
预测X的类别。
输入样本的预测类被计算为具有最高平均预测概率的类。如果基本估计器不实现
predict_proba
方法,然后诉诸投票。- 参数:
- X形状(n_samples,n_features)的{类数组,稀疏矩阵}
训练输入样本。只有当稀疏矩阵得到基估计器的支持时,稀疏矩阵才被接受。
- 返回:
- y形状的nd数组(n_samples,)
预测的班级。
- predict_log_proba(X)[源代码]#
预测X的类对数概率。
输入样本的预测类别对数概率计算为集合中基本估计量的平均预测类别概率的对数。
- 参数:
- X形状(n_samples,n_features)的{类数组,稀疏矩阵}
训练输入样本。只有当稀疏矩阵得到基估计器的支持时,稀疏矩阵才被接受。
- 返回:
- p形状的nd数组(n_samples,n_classes)
输入样本的类对数概率。类的顺序与属性中的顺序相对应 classes_ .
- predict_proba(X)[源代码]#
预测X的类概率。
输入样本的预测类概率被计算为系综中基本估计量的平均预测类概率。如果基本估计器不实现
predict_proba
方法,然后它诉诸投票,输入样本的预测类别概率代表预测每个类别的估计器的比例。- 参数:
- X形状(n_samples,n_features)的{类数组,稀疏矩阵}
训练输入样本。只有当稀疏矩阵得到基估计器的支持时,稀疏矩阵才被接受。
- 返回:
- p形状的nd数组(n_samples,n_classes)
输入样本的类概率。类的顺序与属性中的顺序相对应 classes_ .
- score(X, y, sample_weight=None)[源代码]#
返回给定测试数据和标签的平均准确度。
在多标签分类中,这是子集准确度,这是一个苛刻的指标,因为您需要为每个样本正确预测每个标签集。
- 参数:
- X形状类似阵列(n_samples,n_features)
测试样本。
- y形状的类似阵列(n_samples,)或(n_samples,n_outputs)
真正的标签
X
.- sample_weight形状类似数组(n_samples,),默认=无
样本重量。
- 返回:
- score浮子
平均准确度
self.predict(X)
w.r.t.y
.
- set_fit_request(*, sample_weight: bool | None | str = '$UNCHANGED$') BaggingClassifier [源代码]#
请求元数据传递给
fit
法请注意,此方法仅适用于以下情况
enable_metadata_routing=True
(见sklearn.set_config
).请参阅 User Guide 关于路由机制如何工作。The options for each parameter are:
True
:元数据被请求并传递给fit
如果提供的话。如果未提供元数据,则会忽略请求。False
:未请求元数据,元估计器不会将其传递给fit
.None
:不请求元数据,如果用户提供元估计器,则元估计器将引发错误。str
:元数据应通过此给定别名而不是原始名称传递给元估计器。
默认 (
sklearn.utils.metadata_routing.UNCHANGED
)保留现有请求。这允许您更改某些参数的请求,而不是其他参数。Added in version 1.3.
备注
只有当该估计器用作元估计器的子估计器时,该方法才相关,例如在
Pipeline
.否则就没有效果了。- 参数:
- sample_weight字符串、真、假或无, 默认=sklearn.utils. metalics_Routing.UNChanged
元数据路由
sample_weight
参数fit
.
- 返回:
- self对象
更新的对象。
- set_params(**params)[源代码]#
设置此估计器的参数。
该方法适用于简单估计器以及嵌套对象(例如
Pipeline
).后者具有以下形式的参数<component>__<parameter>
以便可以更新嵌套对象的每个组件。- 参数:
- **paramsdict
估计参数。
- 返回:
- self估计器实例
估计实例。
- set_score_request(*, sample_weight: bool | None | str = '$UNCHANGED$') BaggingClassifier [源代码]#
请求元数据传递给
score
法请注意,此方法仅适用于以下情况
enable_metadata_routing=True
(见sklearn.set_config
).请参阅 User Guide 关于路由机制如何工作。The options for each parameter are:
True
:元数据被请求并传递给score
如果提供的话。如果未提供元数据,则会忽略请求。False
:未请求元数据,元估计器不会将其传递给score
.None
:不请求元数据,如果用户提供元估计器,则元估计器将引发错误。str
:元数据应通过此给定别名而不是原始名称传递给元估计器。
默认 (
sklearn.utils.metadata_routing.UNCHANGED
)保留现有请求。这允许您更改某些参数的请求,而不是其他参数。Added in version 1.3.
备注
只有当该估计器用作元估计器的子估计器时,该方法才相关,例如在
Pipeline
.否则就没有效果了。- 参数:
- sample_weight字符串、真、假或无, 默认=sklearn.utils. metalics_Routing.UNChanged
元数据路由
sample_weight
参数score
.
- 返回:
- self对象
更新的对象。