厦大纪老师chatgpt相关讲座3.7
创始人
2024-05-30 00:33:58
0次

在线更新数据，迭代学习训练，进而提高模型性能。
比较明显的是API部分，这一步学习的就是intruction,实现人机写作的复杂系统工程

在这里插入图片描述
数据充足，维基类似于百度百科
transformer结构更有优势，预测下一个字，模型越大，则condition的range大。

模型遗忘是当模型做一个新任务时，就会忘记旧的任务，而模型足够大，就不会发生这种作用。

大的数据+大的模型——chatgpt


**
在这里插入图片描述

下图中的数据，多为猜测。
数据的搜集过程，无法复制？

在这里插入图片描述
论文中给出了标注数据集类型，有QA等等，需要给出提示

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

​​​在这里插入图片描述

不仅给出了答案，还给出推理chain。

无监督预训练：文本语料570g,代码：159g
有监督：12万个训练集，1653个测试集，集合的意思，不是数据集量
在这里插入图片描述

​​

​​

​​​

​

2、国产大模型硬件基础

不大指望企业，指望国家实验室

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
给标注数据和原始数据，他们把模型做出来。
给data，他们做模型
在这里插入图片描述

在这里插入图片描述

鹏程国家实验室不穷，很有钱

下边的模型花了27个亿

鹏程*神农——新冠预测的模型——4000张GPU卡。
在这里插入图片描述
在这里插入图片描述

国产大模型-神农模型

**用户需求：**蛋白的RDB区域是否病变
**研究动机：**提前预测病毒变异类型

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述
蓝色表示结合亲力上升，月蓝色月可能发生变异
在这里插入图片描述

在这里插入图片描述

新颖的多任务损失函数，是什么？新在哪？

在这里插入图片描述

在这里插入图片描述
**在这里插入图片描述
**

流感病毒能直接迁移吗？应该不行吧？流感应该不是看RBD吧？

在这里插入图片描述

可能的未来的方向
给一部电影，写成一本小说。
给一本小说，拍出来一步电影。

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

一轮300万，学生写的代码完蛋

土豪做法是数据或者任务线性排，没钱，做聚类’

在这里插入图片描述

模型压缩

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

洪永淼：
AI领域的问题：
确定性问题(当输入和输出是确定的)
确定性答案

明确的，可控的情况下做模型。
数据量和标注数据的质量有关。

优化算法中，凸优化问题，怎么更新上万个参数？
梯度更新

词库加载错误:未能找到文件“E:\highferrum_mysql\Configuration\Dict_Stopwords.txt”。

上一篇：三八妇女节即将到来，跨境电商如何玩转节日营销？

下一篇：ant design confirm的使用说明

相关内容

热门资讯

小米手机安卓系统rom,功能与... 你有没有发现，最近小米手机的热度又上来了？没错，就是那个以性价比著称的小米。今天，咱们就来聊聊小米手...
安卓8.0系统自动重启,安卓8... 最近你的安卓手机是不是也遇到了一个让人头疼的问题？没错，就是那个让人抓狂的自动重启！是不是每次正在关...
安卓导航进入系统设置,解锁个性... 亲爱的手机控们，你是否曾在某个午后，手捧着你的安卓手机，突然想探索一下它的深处，看看那些隐藏在系统设...
安卓系统爱疯7,兼容与创新的双... 你知道吗？在科技圈里，最近可是有个大热门呢！那就是安卓系统和爱疯7的较量。这两大操作系统，一个自由奔...
安卓系统第9代,新一代智能系统... 你知道吗？最近科技圈可是炸开了锅，安卓系统第9代横空出世，简直让人眼前一亮！这款全新的操作系统，不仅...
安卓系统屏幕复制软件,轻松实现... 你是不是也和我一样，有时候想分享手机屏幕上的精彩瞬间，但又不知道怎么操作呢？别急，今天就来给你揭秘安...
流量充值软件安卓系统,畅享无忧... 你有没有想过，手机里的流量用完了，却不想再办新卡或者去营业厅充值？现在，有了这些神奇的流量充值软件，...
soc系统和安卓系统的区别,架... 你有没有想过，为什么你的手机里装的是安卓系统而不是soc系统呢？这两种系统各有各的特色，今天就来给你...
宝马连不上安卓系统蓝牙,宝马车... 最近有个事儿让不少宝马车主头疼不已，那就是他们的爱车竟然连不上安卓系统的蓝牙！这可真是让人摸不着头脑...
安卓系统安装gps模块,安卓系... 你有没有想过，为什么你的安卓手机在户外旅行时总是能精准地告诉你位置呢？这背后可大有学问呢！今天，就让...
安卓手机如何修复系统,安卓手机... 手机突然卡顿，系统崩溃，是不是让你头疼不已？别担心，今天就来教你几招，让你的安卓手机焕然一新！一、重...
系统更新华为安卓,引领智能科技... 亲爱的手机控们，是不是最近你的华为手机突然变得有点儿“慢吞吞”了呢？别急，这可不是你的错觉哦！华为安...
安卓系统拦截怎么解除,轻松恢复... 你是不是也遇到了安卓系统拦截的问题，心里直痒痒想要解除它呢？别急，今天就来给你详细说说怎么搞定这个小...
老式平板装安卓系统,重温经典体... 你有没有想过，那些曾经陪伴我们度过无数时光的老式平板电脑，竟然还能装上安卓系统呢？这可不是什么天方夜...
系统如何与安卓互通,技术融合与... 你有没有想过，你的手机系统竟然能和安卓系统这么默契地互通有无？这就像是一场跨越科技界的友谊赛，让我们...
安卓系统 扫码枪,安卓系统下扫... 你有没有想过，在繁忙的超市收银台，那些快速流畅的扫码操作，背后其实隐藏着一个小小的英雄——安卓系统扫...
平板插卡推荐安卓系统,安卓系统... 你有没有想过，你的平板电脑是不是也能像智能手机一样，随时随地扩充存储空间呢？没错，这就是今天我要跟你...
安卓系统固件安装失败,原因排查... 最近是不是你也遇到了安卓系统固件安装失败的问题？别急，让我来给你详细说说这个让人头疼的小麻烦，让你一...
ios系统和安卓区别,系统差异... 你有没有发现，现在手机市场上，iOS系统和安卓系统就像是一对双胞胎，长得差不多，但性格却截然不同。今...
安卓系统2.3优酷,优酷的崛起... 你有没有发现，安卓系统2.3时代的那股怀旧风？那时候，优酷可是视频界的巨头，多少人都是看着优酷长大的...