文档介绍:稀疏学****优化算法
张长水
清华大学自动化系
******@.
2013,11
内容提纲
背景介绍
快速信赖域牛顿法
鲁棒多任务特征学****br/>多阶段多任务特征学****br/>迭代收缩阈值法快速求解非凸优化问题
总结和展望
支持向量机
线性判别
神经网络
主成分分析
C-means
……
优化问题
应用问题
信号处理
人脸识别
文本分析
稀疏学****br/>稀疏数据
向量
矩阵
稀疏学****带有稀疏结构的机器学****问题
稀疏学****一般模型
稀疏学****优化算法
(分块) 坐标下降法
积极集算法
同伦算法
梯度投影法
近似梯度法
……
稀疏学****理论
损失函数? 正则或约束?
假设?
最优解
预测误差:
参数估计误差:
特征选择一致性:
给定观测数据
建立稀疏模型
尽可能恢复真实向量