OnomatoBridge：漫画中的拟声词翻译和渲染管道

漫画是一种用黑白颜料绘制的漫画，在世界范围内广受欢迎。漫画中的拟声词以其独特的视觉风格特别吸引观众，它传达声音、动作和情感。视觉拟声词翻译需要用其他语言的拟声词干净地替换日语拟声词，同时保留其视觉风格。现有的方法在去除日语拟声词和渲染风格化的英语拟声词时经常会产生残留的伪影或风格不一致。为了解决这些问题，我们提出了 OnomatoBridge，一个用于视觉拟声词翻译的过滤管道。我们在 Manga109 拟声词数据集上评估从日语到英语的 OnomatoBridge，并将其与基线图像编辑模型进行比较。实验结果表明，该方法的滤波输出优于传统方法。相对而言，OnomatoBridge 将英语文本的正确性提高了大约 10 到 25 个点，并将残留的日语文本减少了大约 20% 到 50%。