社区
洪贤斌的课程社区_NO_1
Python数据处理与特征工程
帖子详情
嵌入法
DerekLiv
2023-01-13 02:55:17
课时名称
课时知识点
嵌入法
嵌入法
...全文
65
回复
打赏
收藏
嵌入法
课时名称课时知识点嵌入法嵌入法
复制链接
扫一扫
分享
转发到动态
举报
AI
作业
写回复
配置赞助广告
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
互信息
法
求最小
嵌入
维数,matlab
互信息
法
求最小
嵌入
维数,网上下载的,直接输入数据可用
改进后的虚假邻近点
法
选择
嵌入
维数
Cao
法
即改进后的FNN
法
求相空间重构的
嵌入
维数
【特征选择】
嵌入
法
嵌入
法
(Embedded Methods)是一种特征选择方
法
,它将特征选择过程
嵌入
到模型的训练过程中。在训练模型时,
嵌入
法
能够根据特征的重要性自动筛选特征,因此,它可以在训练过程中对特征进行优化。与过滤
法
和包装
法
不同,
嵌入
法
直接利用模型的学习能力来执行特征选择。常见的
嵌入
法
包括基于正则化的方
法
(如Lasso回归、Ridge回归)和决策树算
法
(如随机森林、梯度提升树、XGBoost等)。
sklearn中的特征工程(过滤
法
、
嵌入
法
和包装
法
)
目录编辑特征工程的第一步:理解业务Filter过滤
法
编辑方差过滤编辑- 相关性过滤- 卡方过滤- F检验- 互信息
法
编辑
嵌入
法
(Embedded)包装
法
(Wrapper) 如果特征比较少且容易理解,我们可以自行判断特征的取舍,如前面的泰坦尼克号数据集。但是,在真正的数据应用领域,比如金融,医疗,电商,我们的数据不可能像泰坦尼克号数据的特征这样少,这样明显。那如果遇见极端情况,我们无
法
依赖对业务的理解来选择特征,该怎么办呢?我们有四种方
法
可以用来选择特征:过滤
法
,
嵌入
法
,包装
法
,和降维算
法
过滤方
法
特征选择之
嵌入
法
、
嵌入
法
、排列重要性
特征选择之
嵌入
法
、
嵌入
法
、排列重要性 目录 特征选择之
嵌入
法
、
嵌入
法
、排列重要性
嵌入
法
排列重要性
嵌入
法
嵌入
式特征选择
法
使用机器学习模型进行特征选择。特征选择过程与学习器相关,特征选择过程与学习器训练过程融合,在学习器训练过程中自动进行特征选择。
嵌入
法
常用方
法
: 集成
法
:先使用集成学习机器学习的算
法
和模型进行训练,得到各个特征的权重值系数或者特征重要程度(feature importance),根据系数从大到小选择特征。 正则化
法
:通过L1和L2正则化为模型引入结构风险。L1正则化
洪贤斌的课程社区_NO_1
1
社区成员
20
社区内容
发帖
与我相关
我的任务
洪贤斌的课程社区_NO_1
复制链接
扫一扫
分享
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章