AI系列深度05期:模型如何学习表征并实现对齐?
核心内容
本篇文档探讨了AI模型在学习表征和实现跨模态对齐方面的机制,旨在帮助读者理解表征学习的底层逻辑及其在实际应用中的意义。文档将表征学习分为三个层次:嵌入、自监督学习和多模态对齐(如CLIP),并分析了这些机制在AI技术发展中的作用与价值。
主要观点
- 表征的本质:表征是将文本、图像、商品、用户等对象映射为数字向量,使得语义相近的对象在向量空间中距离更近。
- 嵌入机制:是表征工程化的具体实现方式,为搜索、推荐、以图搜图、向量数据库和RAG等应用提供了基础。
- 自监督学习:通过数据自身构造训练信号,无需人工标注即可学习上下文、语义和结构关系。BERT、MAE、GPT等模型均依赖自监督学习形成可迁移表征。
- CLIP与多模态对齐:CLIP模型通过海量图文配对和对比学习,使图像和文字进入同一语义空间,为图文检索、开放词表识别、文生图、视觉语言模型等应用奠定了基础。
- 表征体系的关键问题:
- 嵌入:解决表征的工程化表达;
- 自监督:解决无标注或弱标注数据下的表征形成;
- CLIP:解决跨模态表征对齐问题。
- AI发展路径:数字AI底座模型的发展路径逐渐清晰,但难以实现物理世界的建模闭环。因此,物理AI将成为未来更具增长潜力的方向,尤其在智能驾驶等场景中已有初步应用。
关键信息
表征学习的三层机制
| 层次 |
机制 |
应用场景 |
| 嵌入 |
将对象映射为数字向量 |
搜索、推荐、以图搜图、向量数据库、RAG |
| 自监督 |
利用数据自身构造训练信号 |
上下文学习、语义学习、结构关系学习 |
| 多模态对齐 |
图像与文字进入同一语义空间 |
图文检索、开放词表识别、文生图、视觉语言模型 |
投资建议与重点公司
| 代码 |
简称 |
行业 |
总市值(亿元) |
27EPS(元) |
28EPS(元) |
27PE |
28PE |
| 600176.SH |
中国巨石 |
建筑建材 |
2,917 |
1.49 |
1.66 |
49 |
44 |
| 300751.SZ |
迈为股份 |
机械 |
788 |
4.04 |
5.79 |
70 |
49 |
| 002371.SZ |
北方华创 |
机械 |
6,419 |
12.53 |
16.47 |
71 |
54 |
| 300604.SZ |
长川科技 |
机械 |
2,166 |
4.80 |
6.55 |
71 |
52 |
| 688630.SH |
芯碁微装 |
电子 |
782 |
7.32 |
9.75 |
75 |
56 |
| 688141.SH |
杰华特 |
电子 |
691 |
1.38 |
4.75 |
111 |
32 |
| 1801.HK |
信达生物 |
医药 |
1,384 |
2.04 |
2.79 |
34 |
25 |
| 688235.SH |
百济神州 |
医药 |
2,413 |
6.28 |
7.38 |
41 |
35 |
| 002428.SZ |
云南锗业 |
计算机 |
785 |
1.71 |
2.57 |
70 |
47 |
| MU.O |
美光科技 |
传媒互联网&海外 |
13,036 |
151.43 |
165.15 |
8 |
7 |
注:上述数据为截至2026年6月30日的市值与盈利预测,港股市值以人民币计算(汇率0.87),美光科技数据以美元计算。
风险提示
- 技术迭代不及预期的风险;
- 大模型厂商ARR增速放缓的风险;
- 云服务商资本开支不及预期的风险;
- 智能驾驶及机器人商业化落地不及预期的风险。
附录:东吴证券研究所机构销售通讯录
公募机构销售
| 区域 |
姓名 |
职位 |
手机 |
| 华北区域 |
安娜 |
华北区域销售总监 |
188-0120-3679 |
| 华北区域 |
卢亚英 |
华北区域销售副总监 |
136-8127-5172 |
| 华北区域 |
姚瑶 |
华北区域销售副总监 |
156-0117-6366 |
| 华北区域 |
李佳南 |
销售 |
156-5220-3010 |
| 华北区域 |
韩琳 |
销售 |
150-6618-8388 |
| 华北区域 |
刘诗琦 |
销售 |
188-1179-3924 |
| 华北区域 |
程心泽 |
销售 |
186-0064-7575 |
| 华北区域 |
张寅瑜 |
销售 |
178-6422-3739 |
| 区域 |
姓名 |
职位 |
手机 |
| 华东区域 |
武晋婧 |
华东区域销售总监兼海外业务销售总监 |
186-2108-1818 |
| 华东区域 |
谢彤 |
华东区域销售副总监 |
185-2133-4346 |
| 华东区域 |
韩青 |
华东区域销售副总监 |
188-1735-2981 |
| 华东区域 |
陈奕舟 |
销售 |
186-1629-1687 |
| 华东区域 |
朱纹佳 |
销售 |
139-6218-9151 |
| 华东区域 |
王馨卉 |
销售 |
182-2161-6582 |
| 华东区域 |
张祎晶 |
销售 |
186-1826-9782 |
| 华东区域 |
刘彦琪 |
销售 |
131-2261-7959 |
| 华东区域 |
宦明 |
销售 |
138-1515-6350 |
| 华东区域 |
毕爽 |
销售 |
138-0437-1290 |
| 华东区域 |
李昕蔚 |
销售 |
188-4603-6786 |
| 区域 |
姓名 |
职位 |
手机 |
| 华南区域 |
封彦竹 |
华南区域销售总监 |
159-8913-2407 |
| 华南区域 |
姚珂 |
华南区域销售副总监 |
188-2332-0511 |
| 华南区域 |
吴芳虹 |
华南区域销售副总监 |
198-6673-6086 |
| 华南区域 |
高春贞李可睿 |
销售销售 |
156-0120-3310/156-0186-0246 |
| 华南区域 |
闫娜 |
销售 |
188-2428-5225 |
| 华南区域 |
先琳 |
销售 |
185-6563-7776 |
| 华南区域 |
祝如玉 |
销售 |
188-2642-4740 |
| 华南区域 |
俞云帆 |
销售 |
136-5231-0364 |
| 华南区域 |
刘玥 |
销售助理 |
189-8879-2763 |
| 区域 |
姓名 |
职位 |
手机 |
| 保险机构业务 |
俞雅敏 |
保险业务销售总监 |
186-1637-6606 |
| 保险机构业务 |
罗媛 |
销售 |
187-0190-2356 |
| 保险机构业务 |
刘昕彤 |
销售 |
188-1130-9155 |
| 保险机构业务 |
董尚文 |
销售 |
191-2133-4561 |
| 保险机构业务 |
江迎若 |
销售 |
186-1612-2668 |
| 保险机构业务 |
汤祎祎 |
销售 |
158-9506-6578 |
| 区域 |
姓名 |
职位 |
手机 |
| 银行及创新业务 |
汤婷 |
银行及创新业务销售总监 |
138-1190-4357 |
| 银行及创新业务 |
梅沁 |
销售 |
150-5733-5883 |
| 银行及创新业务 |
王莹莹 |
销售 |
135-8175-2401 |
| 银行及创新业务 |
王朝阳 |
销售 |
136-6137-9921 |
| 银行及创新业务 |
张琛 |
销售 |
151-0450-0067 |
| 银行及创新业务 |
陈睿 |
销售 |
159-0049-9885 |
| 银行及创新业务 |
郭欣然 |
销售 |
173-1097-5925 |
| 银行及创新业务 |
过云龙 |
销售 |
157-0156-0032 |
| 区域 |
姓名 |
职位 |
手机 |
| 私募业务 |
杭静 |
私募业务销售总监 |
136-0165-9578 |
| 私募业务 |
宋林秋 |
销售 |
188-1027-3834 |
| 私募业务 |
刘茜 |
销售 |
137-7211-1521 |
| 私募业务 |
马昕妍 |
销售 |
180-6149-7613 |
| 私募业务 |
黄龚晗 |
销售 |
156-1873-5185 |
| 私募业务 |
赵已诺 |
销售 |
131-6630-5338 |
| 私募业务 |
励洁茹 |
销售 |
135-8665-3825 |
| 区域 |
姓名 |
职位 |
手机 |
| 海外业务外业 |
武晋婧 |
华东区域销售总监兼海外业务销售总监 |
186-2108-1818 |
| 海外业务外业 |
孙晓颖 |
销售 |
138-1825-4490 |
| 海外业务外业 |
陆梦杰 |
销售 |
150-0621-2434 |
| 区域 |
姓名 |
职位 |
手机 |
| 华非公募 |
杨铭 |
华南区域非公募销售副总监 |
134-8060-0104 |
| 华非公募 |
陈维彤 |
销售 |
159-7956-7783 |
| 华非公募 |
李迪 |
销售 |
156-5296-8676 |
总结
本文系统梳理了AI模型在表征学习与跨模态对齐方面的核心机制,强调了嵌入、自监督学习和多模态对齐在构建通用AI能力中的关键作用。同时,文档提供了重点投资标的及东吴证券研究所的机构销售联系方式,帮助投资者获取更多专业研究支持。