描述bug
我使用的模型是MiniLM:
问题出现在使用以下两种情况时：
- 官方示例脚本：(详细说明如下)
- 我自己的修改过的脚本：(详细说明如下)
一个清晰简洁的描述bug是什么。
重现bug
重现bug的行为的步骤：
- 从https://skylion007.github.io/OpenWebTextCorpus/下载数据集
- 将数据目录设置为解压后的目录
- 给出示例中给定的默认参数并运行
预期行为
模型应该在没有错误的情况下进行训练
描述bug
我使用的模型是MiniLM:
问题出现在使用以下两种情况时：
一个清晰简洁的描述bug是什么。
重现bug
重现bug的行为的步骤：
预期行为
模型应该在没有错误的情况下进行训练
2条答案
按热度按时间w3nuxt5m1#
这似乎是在transformer包中引起的一般文本编码问题。
csga3l582#
我正在面临相同的问题。有人找到解决方案了吗？