请问本模型支持句子向量吗？

[fishfree]

就像流行的sentence-bert那样？

[Ethan-yt]

可以的，只是代码需要做一些修改。可以用所有hidden的平均作为句向量。

[fishfree]

可以的，只是代码需要做一些修改。可以用所有hidden的平均作为句向量。

谢谢你！平均向量这个是所有huggingface transformers大语言模型都支持的吧？如果不是专门训练出来的句向量，取hidden层的average效果恐怕不好吧？

[Ethan-yt]

可以的，只是代码需要做一些修改。可以用所有hidden的平均作为句向量。

谢谢你！平均向量这个是所有huggingface transformers大语言模型都支持的吧？如果不是专门训练出来的句向量，取hidden层的average效果恐怕不好吧？

关于效果我没有对比过其他模型，不过你可以试一下。