使用预训练的 BERT 嵌入作为 Spacy 3.0 中 textcat 模型的输入

问题描述

我正在尝试转向 Spacy 3.0 的训练配置文件框架,但无法将设置调整为我想要做的。简而言之,我想使用开箱即用的 textcat 模型之一(例如,词袋),但传入由预训练转换器(例如,bert base cased)生成的词嵌入,无需任何微调。到目前为止,我一直在使用 Spacy 网站上提供的 texcat 配置模板。

任何帮助将不胜感激。如有必要,我可以提供其他详细信息。谢谢!

解决方法

尝试以下配置。 -G 切换到 transformer-o accuracy 切换到 textcat 集成模型:

spacy init config -p textcat -G -o accuracy config.cfg

见:https://spacy.io/api/architectures#TextCatEnsemble

相关问答

Selenium Web驱动程序和Java。元素在(x,y)点处不可单击。其...
Python-如何使用点“。” 访问字典成员?
Java 字符串是不可变的。到底是什么意思?
Java中的“ final”关键字如何工作?(我仍然可以修改对象。...
“loop:”在Java代码中。这是什么,为什么要编译?
java.lang.ClassNotFoundException:sun.jdbc.odbc.JdbcOdbc...