迁移学习_人工智能(python)

【实例截图】

【核心代码】

目 录
写在前面 I
致谢 II
手册说明 III
1 迁移学习基本概念 1
1.1 引子 . . . . . . . . . . . . . . 1
1.2 迁移学习的概念 . . . . . . . . 1
1.3 为什么需要迁移学习？ . . . . 2
1.4 与已有概念的区别和联系 . . 4
1.5 负迁移 . . . . . . . . . . . . . 5
2 迁移学习的研究领域 7
2.1 按目标域标签分 . . . . . . . . 7
2.2 按学习方法分类 . . . . . . . . 7
2.3 按特征分类 . . . . . . . . . . 8
2.4 按离线与在线形式分 . . . . . 8
3 迁移学习的应用 9
3.1 计算机视觉 . . . . . . . . . . 9
3.2 文本分类 . . . . . . . . . . . 9
3.3 时间序列 . . . . . . . . . . . 10
3.4 医疗健康 . . . . . . . . . . . 11
4 基础知识 12
4.1 迁移学习的问题形式化 . . . . 12
4.1.1 领域 . . . . . . . . . . 12
4.1.2 任务 . . . . . . . . . . 12
4.1.3 迁移学习 . . . . . . . 12
4.2 总体思路 . . . . . . . . . . . 13
4.3 度量准则 . . . . . . . . . . . 14
4.3.1 常见的几种距离 . . . . 14
4.3.2 相似度 . . . . . . . . . 14
4.3.3 KL 散度与 JS 距离 . . 15
4.3.4 最大均值差异 MMD . 15
4.3.5 Principal Angle . . . . 16
4.3.6 A-distance . . . . . . . 16
4.3.7 Hilbert-Schmidt Inde-
pendence Criterion . . 16
4.4 迁移学习的理论保证 * . . . . 16
5 迁移学习的基本方法 18
5.1 基于样本迁移 . . . . . . . . . 18
5.2 基于特征迁移 . . . . . . . . . 19
5.3 基于模型迁移 . . . . . . . . . 19
5.4 基于关系迁移 . . . . . . . . . 20
6 第一类方法：数据分布自适应 22
6.1 边缘分布自适应 . . . . . . . . 22
6.1.1 基本思路 . . . . . . . 22
6.1.2 核心方法 . . . . . . . 22
6.1.3 扩展 . . . . . . . . . . 24
6.2 条件分布自适应 . . . . . . . . 25
6.3 联合分布自适应 . . . . . . . . 26
6.3.1 基本思路 . . . . . . . 26
6.3.2 核心方法 . . . . . . . 26
6.3.3 扩展 . . . . . . . . . . 28
6.4 小结 . . . . . . . . . . . . . . 29
7 第二类方法：特征选择 30
7.1 核心方法 . . . . . . . . . . . 31
7.2 扩展 . . . . . . . . . . . . . . 31
7.3 小结 . . . . . . . . . . . . . . 31
8 第三类方法：子空间学习 32
8.1 统计特征对齐 . . . . . . . . . 32
8.2 流形学习 . . . . . . . . . . . 34
8.3 扩展与小结 . . . . . . . . . . 36
9 深度迁移学习 37
9.1 深度网络的可迁移性 . . . . . 37
9.2 最简单的深度迁移：finetune . 41
9.3 深度网络自适应 . . . . . . . . 42
9.3.1 基本思路 . . . . . . . 42
9.3.2 核心方法 . . . . . . . 43
9.3.3 小结 . . . . . . . . . . 48
9.4 深度对抗网络迁移 . . . . . . 48
9.4.1 基本思路 . . . . . . . 48
9.4.2 核心方法 . . . . . . . 48
9.4.3 小结 . . . . . . . . . . 51
10 上手实践 52
I
迁移学习简明手册
11 迁移学习前沿 58
11.1 机器智能与人类经验结合迁移 58
11.2 传递式迁移学习 . . . . . . . . 58
11.3 终身迁移学习 . . . . . . . . . 59
11.4 在线迁移学习 . . . . . . . . . 60
11.5 迁移强化学习 . . . . . . . . . 61
11.6 迁移学习的可解释性 . . . . . 61
12 总结语 62
13 附录 63
13.1 迁移学习相关的期刊和会议 . 63
13.2 迁移学习研究学者 . . . . . . 63
13.3 迁移学习资源汇总 . . . . . . 66
13.4 迁移学习常用算法及数据资源 67