澳门城市大学张宏纲教授(IEEE Fellow)本学期在澳门城市大学数据科学学院针对研究生开设了《人工智能前沿专题-大语言模型基础导论》课程,该课程的主要内容包括:LLM的基本概念、关键机制和方法、AI Agent、LLM与强化学习、大模型的数学原理、扩散模型、通信专属大模型和NetGPT、以及DeepSeek的若干技术内核。

该ppt共分为8各部分,具体如下:

  1. The Background and Basics of Data-Driven Scaling Law, Transformer, andFoundation Models (LLMs/LMMs -Large Language/Multimodal Models);
  2. Key Mechanisms and Methods in Data-Driven LLMs/LMMs - Prompt, Fine-Tuning, LoRA, Mixture of Experts (MoE) , Chain of Thoughts (CoT) and RAG;
  3. Embodied Al Agents and Data-Driven LLMs/LMMs;
  4. Mutual-Play between Data-Driven LLMs/LMMs and Reinforcement Learning;
  5. The Mathematical Basics of Generative Pretrained Transformer (GPT) andData-Driven LLMs/LMMS;
  6. Diffusion Models, Algorithms and Data-Driven LLMs/LMMS;
  7. Telecom LLMs/LMMs, Networked GPT (NetGPT) and other Key Applications;
  8. Summary.

成为VIP会员查看完整内容
4

相关内容

【报告】多模态大型语言模型综述,30页ppt
专知会员服务
65+阅读 · 2024年8月29日
【经典书】非线性优化与工程应用,296页pdf
专知会员服务
58+阅读 · 2022年9月26日
南京大学《高级机器学习》课程,李宇峰老师,附slides
专知会员服务
170+阅读 · 2021年8月24日
最新《机器学习数学基础》书册,109页pdf
专知会员服务
76+阅读 · 2021年2月7日
剑桥大学《数据科学: 原理与实践》课程,附PPT下载
专知会员服务
52+阅读 · 2021年1月20日
斯坦福大学经典《自然语言处理cs224n》2020课件合集
专知会员服务
96+阅读 · 2020年5月25日
 第八届中国科技大学《计算机图形学》暑期课程课件
专知会员服务
60+阅读 · 2020年3月4日
【干货书】计算机科学离散数学,627页pdf
专知
63+阅读 · 2020年8月31日
国家自然科学基金
15+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2016年12月31日
国家自然科学基金
14+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
A Survey of Large Language Models
Arxiv
435+阅读 · 2023年3月31日
Arxiv
73+阅读 · 2023年3月26日
VIP会员
相关主题
相关VIP内容
【报告】多模态大型语言模型综述,30页ppt
专知会员服务
65+阅读 · 2024年8月29日
【经典书】非线性优化与工程应用,296页pdf
专知会员服务
58+阅读 · 2022年9月26日
南京大学《高级机器学习》课程,李宇峰老师,附slides
专知会员服务
170+阅读 · 2021年8月24日
最新《机器学习数学基础》书册,109页pdf
专知会员服务
76+阅读 · 2021年2月7日
剑桥大学《数据科学: 原理与实践》课程,附PPT下载
专知会员服务
52+阅读 · 2021年1月20日
斯坦福大学经典《自然语言处理cs224n》2020课件合集
专知会员服务
96+阅读 · 2020年5月25日
 第八届中国科技大学《计算机图形学》暑期课程课件
专知会员服务
60+阅读 · 2020年3月4日
相关基金
国家自然科学基金
15+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2017年12月31日
国家自然科学基金
0+阅读 · 2017年12月31日
国家自然科学基金
2+阅读 · 2016年12月31日
国家自然科学基金
14+阅读 · 2016年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
4+阅读 · 2014年12月31日
国家自然科学基金
8+阅读 · 2014年12月31日
微信扫码咨询专知VIP会员