Prompt2Model:可自动生成专用NLP模型

云网络11个月前 (09-05)建站教程131

9月5日 消息:卡内基梅隆大学和清华大学的研究人员开发了Prompt2Model系统,可以根据提示自动生成专用NLP模型。

当然,Prompt2Model 并不是GPT-4的替代品,而是用于特殊用途 NLP 模型的自动化管道,这些模型可以很好地执行特定任务,比大型模型小得多,因此可以在低端的的硬件上本地运行。

6382950431974333948201512.png

Prompt2Model系统首先将提示分解为结构化语句,然后查找可能对当前任务有用的数据集。之后利用OpenAI的GPT-3.5Turbo生成针对该任务的合成训练数据。接着识别合适的预训练模型进行微调。

研究人员在三项基准测试中评估了Prompt2Model的结果。在两项任务中,结果的Flan-T5模型表现优于GPT-3.5Turbo。但在第三项基准测试中,Prompt2Model明显落后于OpenAI模型。

Prompt2Model目前主要局限在仅支持英语的任务上。团队表示,GPT-3.5Turbo本身的语言支持有限是其原因。而Prompt2Model依赖OpenAI模型生成数据也限制了其商业应用,OpenAI禁止利用自己的模型训练可能与其竞争的模型。

不过,团队正在探索集成大规模开源语言模型来减少对专有API的依赖。

项目网址:https://github.com/neulab/prompt2model


相关文章

经销商回应外卖员爬泰山送键盘:销售团队策划的活动

9月9日消息,有网友发视频称,他们在泰山游玩时偶遇一名外卖员徒步上山送外卖。外卖员称顾客付费了500元,还帮其支付了门票费用。然而经过核实,这件事是某键盘品牌经销商团队策划的直播带货活动,男子并非外卖...

it技术网站有哪些

it技术网站有:1、博客园;2、开源中国;3、SegmentFault;4、CSDN;5、掘金;6、github;7、脚本之家;8、红黑联盟;9、前端笔记;10、知识与问答。其中,博客园是一个主要面向...

更新计算机DNS缓存命令

如果你的域名更换了IP解析,本地ping一直还是旧IP,访问不了?如果你的域名CNAME别名更换了IP解析,本地ping一直还是旧IP,访问不了?这可能是由于你本地的DNS缓存引起。可以清除计算机的D...

香港空间换国内主机需要重新备案吗?

网站备案哪些事说复杂也是非常复杂的,说简单也是非常简单的。因人而异吧,如果有一个懂技术的人,看一眼就会懂的,但是对于一个什么都不知道的也许就难了,比如什么是ftp、什么是解析、怎么上传相关资料等等。那...

免费2年!苹果iPhone 15卫星通信新功能:没信号也能求救

快科技9月13日消息,苹果iPhone 14支持卫星通讯技术,而随着苹果iPhone 15的发布,苹果将推出卫星请求道路救援功能。据官方介绍,该功能依托苹果现有卫星服务所用的相同先进技术,与美国最大的...

java web开发需要哪些软件

java web开发需要的软件:1、JDK 8;2、JetBrains IntelliJ IDEA;3、MySQL;4、Redis;5、Git;6、Node.js;7、WebStorm。其中,JDK...