火花NLP中的BERT微调

问题描述

我看到sparkNLP已经对BERT和elmo嵌入进行了预训练,但是我还无法确定是否有一种方法可以对嵌入进行微调。

我看到有下游任务,但是我不确定是否只是提取BERT嵌入然后将其插入到这些新的下游任务中,或者下游任务是否基于BERT的转换器架构构建(因此允许我们对嵌入进行微调)。

有人可以对此进行解释吗?还有可能进行微调吗?在进行下游任务训练后,如何才能提取新的权重。谢谢。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)

相关问答

Selenium Web驱动程序和Java。元素在(x,y)点处不可单击。其...
Python-如何使用点“。” 访问字典成员?
Java 字符串是不可变的。到底是什么意思?
Java中的“ final”关键字如何工作?(我仍然可以修改对象。...
“loop:”在Java代码中。这是什么,为什么要编译?
java.lang.ClassNotFoundException:sun.jdbc.odbc.JdbcOdbc...