lipiji / TtT

code for ACL2021 paper "Tail-to-Tail Non-Autoregressive Sequence Prediction for Chinese Grammatical Error Correction"

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

这是该模型预测的一些结果

lixumin-zai opened this issue · comments

  • SIGHAN15
白 天 机 械 可 替 换 轮 流 运 转 以 减 少 噪 因 。 <-MASK-> <-SEP->	白 天 际 以 可 未 换 快 流 运 衣 以 年 少 都 因 。 <-SEP-> <-SEP->
更 换 或 进 一 步 改 善 处 里 味 道 的 设 备 。 <-MASK-> <-SEP->	更 呢 或 进 一 传 改 善 处 里 味 道 的 设 备 。 <-SEP-> <-SEP->
希 望 您 能 够 以 认 真 的 态 度 面 对 这 些 问 题 且 提 出 处 里 方 案 。 <-MASK-> <-SEP->	希 望 您 能 够 以 认 真 的 态 度 面 对 这 些 问 题 且 提 出 处 里 方 案 。 <-SEP-> <-SEP->
最 后 希 望 您 能 够 听 到 居 民 们 的 心 听 , 尽 快 给 我 们 一 个 合 理 的 处 里 方 案 , 还 给 居 民 一 个 安 静 的 生 活 环 境 。 <-MASK-> <-SEP->	最 后 希 望 您 能 够 听 到 居 民 们 的 心 听 , 尽 多 给 我 们 一 个 合 里 的 处 里 方 案 , 还 给 居 民 一 个 安 静 的 生 活 环 境 。 <-SEP-> <-SEP->
她 有 花 生 过 敏 阿 ! 她 昨 天 快 差 一 点 死 掉 了 ! <-MASK-> <-SEP->	她 有 花 生 过 个 啊 ! 她 昨 天 快 差 一 点 死 掉 了 ! <-SEP-> <-SEP->
我 忘 记 了 那 个 臭 味 ! 工 厂 让 全 部 附 近 都 超 级 抽 。 <-MASK-> <-SEP->	我 洗 记 了 那 个 臭 味 ! 工 厂 让 全 为 附 进 都 超 级 此 。 <-SEP-> <-SEP->
我 们 受 不 了 了 ! 李 厂 厂 你 必 须 改 变 工 厂 ! 我 要 告 诉 您 怎 么 解 决 我 们 的 问 题 。 <-MASK-> <-SEP->	我 们 受 不 了 了 ! 完 厂 厂 你 必 需 该 变 工 厂 ! 我 要 告 诉 您 怎 么 解 决 我 们 的 问 题 。 <-SEP-> <-SEP->
音 和 臭 味 影 响 大 家 的 环 境 , 不 能 让 邻 居 狗 舒 服 的 日 子 。 <-MASK-> <-SEP->	音 和 臭 味 影 响 大 家 的 环 境 , 不 能 让 鲜 哪 狗 舒 服 的 日 子 。 <-SEP-> <-SEP->
如 果 没 处 理 , 我 们 就 没 办 法 可 能 要 去 仅 差 距 报 告 。 <-MASK-> <-SEP->	如 果 没 处 里 , 我 们 就 没 办 法 可 能 要 去 仅 差 距 抱 告 。 <-SEP-> <-SEP->
  • HybirdSet
心 爱 的 李 大 明 ! <-MASK-> <-SEP->	性 爱 的 李 大 名 ! <-SEP-> <-SEP->
今 来 怎 么 样 ? 身 体 好 码 ? 我 因 为 刚 开 学 所 以 有 一 点 忙 , 不 能 写 信 给 你 。 今 天 给 你 写 信 是 要 告 诉 你 一 个 好 消 息 。 <-MASK-> <-SEP->	今 来 怎 么 样 ? 身 体 好 码 ? 我 因 为 刚 开 学 所 以 有 一 点 马 , 不 能 写 信 给 你 。 今 天 给 你 导 信 是 要 告 诉 你 一 个 好 消 息 。 <-SEP-> <-SEP->
事 情 是 这 样 : 我 刚 交 了 一 个 男 朋 友 。 我 门 在 学 校 里 面 见 面 。 谈 过 几 次 话 感 觉 个 性 复 合 , 所 以 交 往 了 。 <-MASK-> <-SEP->	事 情 是 这 样 : 我 刚 交 了 一 个 男 朋 友 。 我 们 在 学 校 里 面 见 面 。 谈 过 几 次 话 感 觉 个 性 复 合 , 所 以 交 往 了 。 <-SEP-> <-SEP->
听 到 这 个 消 息 , 你 有 一 点 奇 怪 的 感 觉 是 不 是 ? 因 为 从 以 前 到 线 再 我 还 每 一 次 交 过 男 朋 友 。 <-MASK-> <-SEP->	听 到 这 个 消 息 , 你 有 一 点 奇 怪 的 感 觉 是 不 是 ? 因 为 从 以 前 倒 线 再 我 还 每 一 次 交 过 男 朋 友 。 <-SEP-> <-SEP->
你 知 道 码 ? 以 前 还 没 交 过 男 朋 友 , 我 总 觉 得 有 了 男 朋 友 又 怎 么 样 呢 ? 只 是 花 了 时 间 , 如 果 个 性 不 适 合 就 总 是 吵 架 , 那 时 候 心 里 会 很 烦 恼 的 。 <-MASK-> <-SEP->	你 知 道 码 ? 以 前 还 没 交 过 男 朋 友 , 我 总 觉 地 有 了 男 朋 友 又 怎 么 样 你 ? 只 是 花 了 时 间 , 如 果 个 性 不 适 合 就 总 是 吵 架 , 那 时 候 鑫 里 会 很 烦 恼 的 。 <-SEP-> <-SEP->
可 事 现 在 事 情 不 是 跟 以 前 这 样 想 了 。 跟 他 在 一 起 , 我 绝 得 很 快 乐 和 幸 福 。 <-MASK-> <-SEP->	可 事 现 在 事 情 不 是 跟 以 前 这 样 想 了 。 跟 他 在 一 起 , 我 绝 的 很 快 乐 和 幸 福 。 <-SEP-> <-SEP->
如 果 又 机 会 , 我 会 带 他 来 给 您 介 绍 。 看 到 了 他 你 依 定 会 开 心 的 。 <-MASK-> <-SEP->	如 果 又 机 会 , 我 会 带 他 来 给 您 届 绍 。 看 到 了 他 你 依 定 会 开 心 的 。 <-SEP-> <-SEP->
时 安 部 早 了 , 在 建 有 空 会 再 写 信 给 你 。 保 重 。 <-MASK-> <-SEP->	时 安 不 早 了 , 在 建 有 空 会 再 写 信 给 你 。 保 重 。 <-SEP-> <-SEP->

我的实验结果中,基本的bert模型只是简单训练了一下,用的自己的语料库720M。貌似真正改在错误位置的频率低效果差,还会把正确位置的修改了,是我的bert模型的问题吗?还是其他配置的问题呢?

由于本人刚入门nlp,对一些专有名词不是很了解,代码可能一时半会看不懂,所以前来咨询下。

BERT很重要,纠错模型使劲训练多多迭代。
等我把模型重新训练好release出来。

@lixumin-zai 你把代码跑起来了吗,我也是刚入门nlp,代码跑步起来很崩溃,能否跟你聊一下呢

好吧,谢谢大佬!