定性特征转化为定量特征之factorize

前面介绍了独热编码和哑编码,还有一种可以将定性特征转化为定量特征的方法,即factorize(),下面将介绍一下该方法

概要:在泰坦尼克灾难预测中,dummy不好处理Cabin(船舱号)这种标称属性,因为它出现的变量比较多。所以Pandas有一个方法叫做factorize(),它可以创建一些数字,来表示类别变量,对每一个类别映射一个ID,这种映射最后只生成一个特征,不像dummy那样生成多个特征。

factorize函数可以将Series中的标称型数据映射称为一组数字,相同的标称型映射为相同的数字。factorize函数的返回值是一个tuple(元组),元组中包含两个元素。第一个元素是一个array,其中的元素是标称型元素映射为的数字;第二个元素是Index类型,其中的元素是所有标称型元素,没有重复。
看代码:

 

df = pd.DataFrame({"id":[1,2,3,4,5,6,3,2],"raw_grade":['a','b','b','a','a','e','c','a']})
print(df)
x = pd.factorize(df.raw_grade)
print(x)

 

   id raw_grade
0   1         a
1   2         b
2   3         b
3   4         a
4   5         a
5   6         e
6   3         c
7   2         a
(array([0, 1, 1, 0, 0, 2, 3, 0], dtype=int64), Index(['a', 'b', 'e', 'c'], dtype='object'))
print(x[0])
print(x[1])
[0 1 1 0 0 2 3 0]
Index(['a', 'b', 'e', 'c'], dtype='object')

 

看一下x的类型

print(type(x))
<class 'tuple'>

 

总结:对于one-hot encoding、dummy enconding还是factorize都可以将定性特征转化为定量特征,三种方法各有各自最适用的场合,要根据实际情况作出最合理的选择,以便在数据处理的过程中得到最理想的结果。

 

posted @ 2019-03-19 16:22  djesse1  阅读(1714)  评论(0编辑  收藏  举报