多GPU训练bert问题
GaoJianchao opened this issue · comments
ValueError: You must specify an aggregation method to update a MirroredVariable in Tower Context"
该怎么修改优化器？
这个问题不太适合在这里发, 建议你上网找一下教程, 或者参考一下这个repo里优化器和官方的优化器是怎么定义变量的
JayYip / m3tl
BERT for Multitask Learning