基础也可以复现Consert"/>
零基础也可以复现Consert
一、模型介绍
Consert是由2021年的论文:A Contrastive Framework for Self-Supervised Sentence Representation Transfer提出,现在在深度学习网络中应用越来越广泛。论文地址:.acl-long.393.pdf 为解决BERT原生句子表示这种“坍缩”现象,美团NLP中心知识图谱团队提出了基于对比学习的句子表示迁移方法——ConSERT,通过在目标领域的无监督语料上Fine-tune,使模型生成的句子表示与下游任务的数据分布更加适配。在句子语义匹配(STS)任务的实验结果显示,同等设置下ConSERT相比此前的SOTA大幅提升了8%,并且在少样本场景下仍表现出较强的性能提升。
接下来我们一起看看如何快速进行论文复现吧!
二、创建实例
首先打开极链AI云的官网,选择模型创建实例:
=csdn
由于平台已经配置了Consert的模型库,所以能够一键创建实例,轻松又便捷~
三、论文复现
1、在root/consert/data路径下,下载数据集:
2、创建输出文件夹output
3、在root/consert/路径下,输入训练代码:
训练效果如下:
4、root/consert/路径下,输入推理代码:
推理效果如下:
到这里,我们就已经完成了consert的整个复现成果~具体的模型简介和代码可以在模型详情页查看👍
为了使复现更加方便高效,我们为每一个模型都配置了专属的模型详情页。
模型详情页详细展现了模型的使用方法(包含训练和推理的使用方式和测试案例)在证明模型配置的完整性和方便用户直接测试模型效果上,为用户进一步开发和训练模型提供便利。
极链AI云平台现在更新了大量模型和数据库!省去了繁琐冗长的上传时间,让论文复现一步到位!快去官网试试吧~
ps.在平台没有找到模型的小伙伴可以参加我们的论文复现活动,在学习同时更有云币券作为奖励,快戳小助手咨询详情吧~
更多推荐
零基础也可以复现Consert
发布评论