【问题标题】:BART finetune run_train.sh generates models with performance issuesBART 微调 ​​run_train.sh 生成有性能问题的模型
【发布时间】:2020-08-27 13:58:04
【问题描述】:

我已经以 75000 步运行了 run_train.sh 脚本,模型仍然无法产生一个像样的总结。

以下是从 run_train.sh 训练的模型生成的示例摘要,该模型仍然很糟糕: 金伯利……还有更好的”她)。 am New other" on aag like.) in when, - d you,'] first her A what Kim Thef into here or the said has'm her own ab it had,”out no up are],新的 isar 吗? [。那玩意儿

我确实注意到https://github.com/huggingface/transformers/tree/master/examples/summarization/bart 上的“(WIP)胭脂分数”。我想知道微调代码是否已完成模型性能验证。

【问题讨论】:

    标签: huggingface-transformers


    【解决方案1】:

    需要在模型配置中设置 output_past 为 true。详情请见https://github.com/microsoft/nlp-recipes/pull/591

    【讨论】:

      猜你喜欢
      • 2021-03-27
      • 2015-03-06
      • 2021-03-16
      • 1970-01-01
      • 1970-01-01
      • 2022-12-22
      • 1970-01-01
      • 2017-09-10
      • 1970-01-01
      相关资源
      最近更新 更多