2023-AI行业深度报告:ChatGPT-AI模型框架研究.pptx
ChatGPT:AI模型框架研究
——AI行业深度报告;
一、AI框架重要性日益突显,框架技术发展进入繁荣期,国内AI框架技术加速发展:
1、AI框架作为衔接数据和模型的重要桥梁,发展进入繁荣期,国内外框架功能及性能加速迭代;
2、Pytorch、Tensorflow占据AI框架市场主导地位,国内大厂加速布局AI框架技术;
3、AI框架技术从工具逐步走向社区,生态加速形成,未来围绕安全可信、场景落等维度呈现显著发展趋势;
二、GPT开启AI大模型时代,国内外大厂发力布局,商业化空间加速打开:
1、数据、算法、模型三轮驱动AI发展,大模型优势显著,成为AI主流方向;
2、GPT开启千亿参数级AI大模型时代,语言、视觉、科学计算等大模型快速发展;
3、微软加速AI商用化进程,国内大厂发力布局,看好在细分场景下的应用落地;
三、建议关注标的:
1、基础层:AI算力:中科曙光;大模型:360,科大讯飞
2、应用层:AI+工具:金山办公;AI+建筑:广联达;AI+法律:通达海;AI+医疗:创业慧康,久远银海;AI+教育:科大讯飞;AI+网安:安恒信息、奇安信;AI+金融:同花顺;AI+交通:佳都科技;
AI框架;;;
Python
Lua,Python
(new)
C++
Python
C++
Lua,Python(new
)
Python
C++、CUDA、
Python;
7
资料来源:PaperswithCode,Omedia,;
适用人群广泛;
?简单易懂:PyTorch具有用户友好的API;
?便于调试:对Python生态的良好支持;
?强大高效:Pytorch提供了非常丰富的模型组件。;
Tensorflow从0.1到2.0的发展历程;;
飞桨产业级深度学习开源开放平台;
多种开发语言无缝衔接;
AI大模型;
15
资料来源:CSDN、腾讯网、新浪网、;
资料来源:IDC《2022中国大模型发展白皮书》、;;
GPT-4;
InstructGPT/GPT;
02OpenAI以GPT为基石,深度布局各模态AI及各类应用
Whisper语音-文本模型DALL-E2文本-图像模型ChatGPT;
21
资料来源:CSDN、机器学习算法与自然语言处理、电子工程世界等、;;;;
?Copilot可以跨应用程序生成内容。例如,根据Word文档,可以生成一个10张幻灯??的PPT
?提升演讲效果,增加字体大小和间距,在演讲稿中添加演讲提醒
?一键压缩冗长的演示文稿,调整布局、重新格式化文本和完美的时间动画。;
Phenaki文本-视频GPT-3;;
坐拥大模型+训练框架+数据+社区多重优势,百度有望成为AIGC领域率先实现商业化的领头羊。
自2019年发布ERNIE1.0,百度持续投入大模型的技术创新与产业应用,布局了NLP、CV、跨模态等大模型,率先提
出行业大模型,成了支撑大模型产业落地的关键路径,构建文心大模型层、工具平台层、产品与社区三层体系。
根据IDC的大模型评分,在产品能力、生态能力和应用能力三个维度上百度均位于第一梯队,且在生态维度远高于平均
水平,这得益于百度的大模型框架“飞桨”、旸谷社区。
百度于2023年3月发布“文心一言”,成为首款中文生成式对话大模型产品。;
ERNIE版本;
1阿里巴巴率先构建大模型统一底座、通过训练策略大幅提升稀疏参数大模型框架训练效率,在大模型框架上具备领先地位。
阿里巴巴2021年3月发布M6,成为国内最早提出千亿模型的厂商,同年发布十万亿模型M6-10T,通过expert
prototyping训练策略成功实施MoE稀疏参数模型,使模型达到10万亿参数级别。
2022年9月发布通义大模型,通过统一学习范式M6-OFA和模块化的设计,提升大模型跨模态能力和效率。 2023年报电话会上,集团CEO张勇表示针对生成式AI趋势,将全力构建预训练大模型。;
02华为:盘古大模型聚焦实业
1华为盘古大模型深耕实业,拥有更广泛的行业大模型,具备更强的落地能力。
1基于ModelAr