【ChatGPT研究】自回归语言模型-RNN神经网络模型v2

fxhhxf1996 · 发表于 2023-4-23 14:35:02

黑月的模块求分享，网上找不到模块

fxhhxf1996 · 发表于 2023-4-23 14:20:18

有人试过训练写易语言吗

星辰ovo · 发表于 2023-4-22 14:44:44

666666666666666666666666666

hefuqiangqiang · 发表于 2023-4-19 00:26:59

感谢分享，学习学习新知识。

8554036 · 发表于 2023-4-18 12:05:51

啊呀~~这难到是E版的聊天AI要开始了吗~

叮小当 · 发表于 2023-4-18 10:45:46

维斯忒发表于 2023-4-18 10:04
这个不能保存训练的模型，还有易语言可以调用很多程序，可以用其他的来编写成为一个dll或者其他的给易语言 ...

可以加上保存功能，就是将那几个层中的矩阵数据保存到本地，以及词典

维斯忒 · 发表于 2023-4-18 10:04:27

这个不能保存训练的模型，还有易语言可以调用很多程序，可以用其他的来编写成为一个dll或者其他的给易语言调用，比如py可以打包使用CMD给易语言来调用之类，这样子就可以更好在易语言应用，只把他作为一个界面设计

壮志豪情 · 发表于 2023-4-17 13:59:43

这么牛逼的吗

叮小当 · 发表于 2023-4-17 13:57:48

本帖最后由叮小当于 2023-4-17 14:04 编辑

琪诺兔发表于 2023-4-17 13:31
根据昨天的试验，我使用标注过的数据进行训练，几千行的情况下感觉在10几轮左右不管如何调整都会严重过拟 ...

这个RNN模型是循环模型，目前没有标注的标准，从代码中看，他是以行进行训练的。你也可以问问chatgpt，如何改善
通过关注loss值的下降来判断是否过拟合，正确的loss值应该是均匀下降的，loss值如果开始上升就代表开始过拟合，可以通过学习率来调整

琪诺兔 · 发表于 2023-4-17 13:31:15

本帖最后由琪诺兔于 2023-4-17 13:57 编辑

叮小当发表于 2023-4-17 10:54
我也发现了这个错误，并已经修正了代码，详见下方图片

这个模型只是一个简单的演示，想要达到理解问答的 ...

根据昨天的试验，我使用标注过的数据进行训练，几千行的情况下感觉在10几轮左右不管如何调整都会严重过拟合，看来还得增加行数，另我其实并不清楚我的标注形式是否正确。请问有标注规范一类可以参考的东西嘛？对于换行符和符号一类应该如何标注。

		自动登录	找回密码
密码			注册

[易源码分享] 【ChatGPT研究】自回归语言模型-RNN神经网络模型v2