无图版
帮助
论坛首页
登录
注册
讨论区
搜索
社区服务
屏蔽配置
刷新黑名单
好奇模式
清空列表
管理列表
■
帖子 |
■
头像
社区论坛任务
用户名
UID
Email
认证码
点此显示验证码
热门版块:
茶馆
询问&求物
免空资源区
同人音声
网赚资源区
游戏资源
Soulplus
Wind
用户中心首页
编辑个人资料
查看个人资料
好友列表
用户权限查看
积分管理
积分转换
特殊组购买
收藏夹
我的主题
基本统计信息
到访IP统计
管理团队
管理统计
在线统计
会员排行
版块排行
帖子排行
个人首页
我的收藏
好友近况
南+ South Plus
AI交流 (beta)
有玩RWKV模型的同好吗?
漫区特设
Comic Market 103
Comic Market 102
サンクリ
Comic1☆
其他同人志
一般漫画
例大祭&紅楼夢
汉化本发布
旧物仓库
蜜柑计划
- 蜜柑计划 - Mikan Project
综合交流
ACG交流
轻小说
原创绘画
原创小说区
询问&求物
茶馆
AI交流 (beta)
免空资源区
网赚资源区
人民囧府
事务受理
上一主题
下一主题
新 帖
|
浏览器收藏
|
打印
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
GF
2023-06-26 23:30
(别低头绿帽会掉)
只看GF
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
有玩RWKV模型的同好吗?
有客户端可以一键本地部署,需要的内存小,续写小说的写出来的文字也还不错,但是现在的训练模型都是喂的正常网文。不知道有没有大佬可以分享分享微调的经验啊
顶端
回复
引用
分享
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
B1F
2023-06-26 23:32
(别低头绿帽会掉)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
分享几个折腾的链接。一个人研究太痛苦了。
模型介绍:
https://zhuanlan.zhihu.com/p/619721229
训练相关:
https://zhuanlan.zhihu.com/p/629809101
一键配置教程+文件:
https://www.bilibili.com/video/BV1hM4y1v76R/?spm_id_from=333.337.search-card.all.click
顶端
回复
引用
分享
812a1470
作者资料
发送短消息
加为好友
UID:
1396097
精华:
0
发帖:
16
HP:
0 点
SP币:
167 G
昵称:
在线时间: 31(小时)
注册时间:
2021-03-06
最后登录:
2024-05-15
B2F
2023-06-27 00:38
(yeah)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
配置不太好,不太带得起,而且尝试了写不了瑟瑟的
顶端
回复
引用
分享
0去年夏天0
作者资料
发送短消息
加为好友
UID:
1566712
精华:
0
发帖:
34
HP:
0 点
SP币:
2667 G
昵称: 0去年夏天0
在线时间: 41(小时)
注册时间:
2022-03-30
最后登录:
2024-05-15
B3F
2023-06-27 17:40
(这里我也不知道写点啥好啊)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
还行吧,你用的1.5B吗?我测试1.5B貌似确实写不了涩涩,3B和7B 会好很多。
顶端
回复
引用
分享
ec47d06e
作者资料
发送短消息
加为好友
UID:
790069
精华:
0
发帖:
45
HP:
0 点
SP币:
430 G
昵称:
在线时间: 174(小时)
注册时间:
2017-05-09
最后登录:
2024-04-20
B4F
2023-06-27 21:01
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
rwkv有个huangwen模型,我下下来试了下感觉还是差点意思,目前在搞涩涩方面可能还是克劳德。
我也在期待什么时候能有本地部署版的克劳德的平替
顶端
回复
引用
分享
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
B5F
2023-06-28 01:24
(别低头绿帽会掉)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
回 2楼(812a1470) 的帖子
主要是得微调,这个对配置需求不高,清华那个CHATGLM需要8张3090才能全参数训练。这个消费级显卡也能够喂他素材搞色色
顶端
回复
引用
分享
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
B6F
2023-06-28 01:25
(别低头绿帽会掉)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
回 3楼(0去年夏天0) 的帖子
我用的7B模型,测试下来一般的玄幻文没有问题,但是没法色色。需要微调,但是我没有合适的训练集,所以看看有没有同好一起弄。
顶端
回复
引用
分享
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
B7F
2023-06-28 01:27
(别低头绿帽会掉)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
回 4楼(ec47d06e) 的帖子
还得是自己训练。这个框架的模型训练好像一张3090就能进行
顶端
回复
引用
分享
小强少爷
作者资料
发送短消息
加为好友
UID:
1053296
精华:
0
发帖:
361
HP:
-6 点
SP币:
14382 G
昵称: 小强少爷
在线时间: 1507(小时)
注册时间:
2018-11-06
最后登录:
2024-05-13
B8F
2023-06-28 19:39
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
要不是嫌慢的话,P40应该够用,无非是慢点多花点电费
训练集比较麻烦
顶端
回复
引用
分享
鞠萍姐姐
作者资料
发送短消息
加为好友
UID:
178609
精华:
0
发帖:
403
HP:
0 点
SP币:
5004 G
昵称: 鞠萍姐姐
在线时间: 698(小时)
注册时间:
2012-12-07
最后登录:
2024-05-15
B9F
2023-06-29 17:37
(别低头绿帽会掉)
只看该作者
|
屏蔽
屏蔽此人
屏蔽头像
|
小
中
大
回 8楼(小强少爷) 的帖子
我在想用GPT4来筛选训练集能不能成形
顶端
回复
引用
分享
上一主题
下一主题
南+ South Plus
AI交流 (beta)
[-- 查看移动版 --]