机器学习学习笔记：sklearn.preprocessing.PolynomialFeatures偏置值inlude_bias设置，以及在Pipeline中的设置

在人工智能课程中学习线性回归一章时，高阶线性回归需要用到PolynomialFeatures方法构造特征。

先看一下官方文档对于sklearn.preprocessing.PolynomialFeatures方法的解释：

Generate polynomial and interaction features.

Generate a new feature matrix consisting of all polynomial combinations of the features with degree less than or equal to the specified degree. For example, if an input sample is two dimensional and of the form [a, b], the degree-2 polynomial features are [1, a, b, a^2, ab, b^2].

简单翻译一下，意思就是：

生成多项式交互特征。

生成一个新的特征矩阵，包含特定阶数及以下的全部多项式组合。例如，样本特征为二维的，包含[a, b]。其全部二阶多项式特征为[1, a, b, a^2, ab, b^2]。

解释一下，其中包含0阶特征[1]，一阶特征为[a， b]，二阶特征[a^2, ab, b^2]。也就是说，你只要输入[a, b]，自动生成并返回[1, a, b, a^2, ab, b^2]这样一个特征矩阵。（偏置值设为默认值include_bias=True）

在用线性模型LinearRegression拟合时，输入新生成的特征矩阵和标签值矩阵，便可以拟合训练为一个相应高阶的模型。

下面展示一下PolynomialFeatures的使用：

1、首先创建一个数据集。

将其分为训练集和验证集，由于这里用不到所以先不生成测试集了。

import numpy as np
from sklearn.model_selection import train_test_split

# 生成训练集与验证集，数据带有标准差为0.1的噪声
n = 100
n_train = int(0.8 * n)
n_valid = int(0.2 * n)
x = 6 * np.random.rand(n, 1) - 3
y = 1.2 * x - 3.4 * (x ** 2) + 5.6 * (x ** 3) + 5 + 0.1 * np.random.randn(n, 1)
x_train_set, x_valid_set, y_train_set, y_valid_set = train_test_split(x, y, test_size=0.2, random_state=5)