如何为Google翻译上的性别中性词提供女性化和男性化两种翻译结果的技术原理
如何消除 ai 带来的性别偏见是个令人头疼的问题，那究竟有没有方法去解决？
12 月 6 日，google 宣布他们迈出了减少 google 翻译中性别偏见的第一步，并且还详细介绍了如何为 google 翻译上的性别中性词提供女性化和男性化两种翻译结果的技术原理。
过去几年，google 翻译通过使用基于端到端的神经网络系统大大提高了翻译质量，但与此同时，模型的翻译结果呈现出了社会偏见，尤其是性别偏见。具体而言，由于 google 翻译的结果一直都是从网上数以亿计的已翻译数据中学习得到，这造成的后果是，即使翻译结果可能具有女性化或男性化形式的倾向，但它也只为查询提供一种翻译。因而，这无可避免地复制了已有的性别偏见。例如，像“强壮”或“医生”这样的词语，它会生成偏向于男性化的翻译结果，而对于“护士”或“美丽”等词汇，则会生成偏向于女性化的翻译。
现在，google 翻译解决了上述问题。当你把诸如“外科医生”这样的单字从英语翻译成法语、意大利语、葡萄牙语或西班牙语时，会得到的男性化和女性化的两种翻译结果。另外，当把短语和句子从土耳其语翻译成英语时，你也会得到这两类翻译，比如你用土耳其语输入“o bir doktor”，就会得到“she is a doctor”和“he is a doctor”这两种按性别翻译的结果。
google 翻译中有特定性别的翻译
google 团队是如何做的？
要知道，支持单字查询的特定性别翻译涉及到用性别属性丰富 google 的底层词库。支持较长（短语和句子）查询的性别翻译尤其具有挑战性，这甚至需要对翻译框架进行部分重构。对于这些较长的查询，他们最初将重点放在从土耳其语到英文的翻译上。总体而言，他们制订了三步法来解决土耳其语中性别中立查询的问题，即同时提供英文的男性化和女性化翻译结果。
检测性别中立查询
许多土耳其语中提到人的句子都是性别中立的，但并不是全部都这样。检测哪些查询符合特定性别的翻译是一个难题，由于土耳其语在形态学上的很复杂，这意味着指代一个人可以是明确的性别中立代词（例如 o，ona）或隐式编码。例如，“biliyor mu？”没有明确的性别中立代名词，可以翻译为“她知道吗？”或“他知道吗？”这种复杂性导致我们不能使用简单的性别中性代词列表来检测性别中立的土耳其语查询，另外我们还需要一个机器学习系统。google 团队估计大约有 10％ 的土耳其语的翻译查询含糊不清，能同时符合女性化和男性化翻译的条件。
为了检测这些查询，他们使用了最先进的文本分类算法(与他们的云自然语言 api 中使用的算法相同)来构建一个系统，该系统能够检测给定的土耳其语查询何时是性别中立的。这就导致在翻译前新增了一个步骤，所以他们必须平衡模型在延迟时的复杂性。google 团队对数千个土耳其人进行系统培训，要求这些人判断出一个给定的例子是否是性别中立的。而他们最终的分类系统是卷积神经网络，以此可以准确检测出需要按性别翻译的查询。
生成特定性别翻译
随后，google 团队增强了基础神经机器翻译（nmt）系统，以便在需要时生成女性化和男性化翻译。当没有要求区分性别时，训练模型生成的是默认翻译。这主要包括：
识别并将平行训练数据划分为具有女性化词语、男性化词语和性别不明词语。
在句子的开头添加一个新增的输入标记，以指定要翻译的所需性别，类似于已构建的多语言 nmt 系统的方式：
o bir doktor→他是一名医生
o bir doktor→她是一名医生
训练增强的 nmt 模型对女性、男性和性别中立数据源的影响。他们对这些来源进行了各种混合比试验，使模型在这三个任务中的表现同样出色。
如果确定用户查询是性别中立的，他们会在翻译请求中添加性别前缀。对于这些要求，他们的最终 nmt 模型可以在 99％ 情况下生成可靠的女性化和男性化性别的翻译结果。此外，系统在没有性别前缀的查询中还能保持翻译质量。
检查准确性
最后的一个步骤决定是否显示特定性别的翻译结果。由于产生男性化翻译的训练数据与产生女性化翻译的训练数据不同，因此在与性别无关的两种翻译间可能存在差异。如果确定特定性别的翻译质量低，则只显示单一的默认翻译。为了确定特定性别的句子翻译质量，他们进行以下验证：
要求的女性翻译是女性化的；
要求的男性化翻译是男性化的；
除了与性别相关的变化，如果女性化和男性化翻译完全相同，即使翻译结果间的措辞发生微小变化也会被系统过滤掉。
男性化和女性化翻译仅在性别方面有所不同，即“he”和“his”与“she”和“her”。因此，他们展示了特定性别的翻译。底部：男性化和女性化翻译在性别方面有所不同，即“he”与“she”。但是，从“really”到“actually”的变化与性别无关。因此，系统将过滤特定性别的翻译并显示默认翻译结果。
如果将所有内容放在一起，输入句子首先会通过分类器，分类器检测它们是否可以进行特定性别翻译。如果分类器说“是”，系统则向增强型 nmt 模型发送三个请求：女性化翻译请求、男性化翻译请求和性别中立翻译请求。最后一步考虑了所有的三个答案，并决定是否显示特定性别翻译或单个默认翻译。google 团队认为，这一步仍然相当保守，为了最大限度提高所显示的特定性别的翻译质量，因此系统的整体召回率仅为 60％ 左右。
对 google来说，这只是他们解决机器翻译系统中性别偏见的第一步，未来，他们计划将特定性别的翻译扩展到更多语言，并解决自动完成查询等功能中的性别偏见问题。此外，他们已经在考虑如何在翻译中解决非二元性别的问题。
霍尼韦尔完成威尔明顿市由经济刺激法案支持的太阳能计划
通过风向风速仪可更好地研究风的变化
诺基亚3、诺基亚5两款入门手机台湾发布 价格亲民
智能巡检机器人开始上岗 保证电网更加安全可靠地运行
Linux系统中如何进行GDB调试
如何为Google翻译上的性别中性词提供女性化和男性化两种翻译结果的技术原理
PbSe量子点被用于制备高性能的光电探测器
安捷伦发表Agilent N6854A-AG1射频传感器网络定位软
高精地图在无人驾驶领域的作用，高精地图与普通导航地图的区别
服务器托管：您的数字业务的稳定基石
oppo和vivo 3000元以下最值得推荐的手机
到2035年，北美LED照明所节省的能源可高达569万亿瓦时
核辐射辐射的是什么？如何防止核辐射？
PCB厂CAM工程师要注意哪些事项
湖南师范大学在DNA纳米传感器用于溶酶体酸化与钾离子流相关性研究取得新进展
沐曦进一步夯实算力基础设施安全底座能力
使用NVIDIA DALI加速医学图像处理
华为Mate40系列发布:支持90Hz高刷新率和240Hz触控采样率
电源线路滤波器电路,带屏蔽层的隔离变压器
Linux在嵌入式系统应用中的探究
12 月 6 日，google 宣布他们迈出了减少 google 翻译中性别偏见的第一步，并且还详细介绍了如何为 google 翻译上的性别中性词提供女性化和男性化两种翻译结果的技术原理。
过去几年，google 翻译通过使用基于端到端的神经网络系统大大提高了翻译质量，但与此同时，模型的翻译结果呈现出了社会偏见，尤其是性别偏见。具体而言，由于 google 翻译的结果一直都是从网上数以亿计的已翻译数据中学习得到，这造成的后果是，即使翻译结果可能具有女性化或男性化形式的倾向，但它也只为查询提供一种翻译。因而，这无可避免地复制了已有的性别偏见。例如，像“强壮”或“医生”这样的词语，它会生成偏向于男性化的翻译结果，而对于“护士”或“美丽”等词汇，则会生成偏向于女性化的翻译。
现在，google 翻译解决了上述问题。当你把诸如“外科医生”这样的单字从英语翻译成法语、意大利语、葡萄牙语或西班牙语时，会得到的男性化和女性化的两种翻译结果。另外，当把短语和句子从土耳其语翻译成英语时，你也会得到这两类翻译，比如你用土耳其语输入“o bir doktor”，就会得到“she is a doctor”和“he is a doctor”这两种按性别翻译的结果。
google 翻译中有特定性别的翻译
google 团队是如何做的？
要知道，支持单字查询的特定性别翻译涉及到用性别属性丰富 google 的底层词库。支持较长（短语和句子）查询的性别翻译尤其具有挑战性，这甚至需要对翻译框架进行部分重构。对于这些较长的查询，他们最初将重点放在从土耳其语到英文的翻译上。总体而言，他们制订了三步法来解决土耳其语中性别中立查询的问题，即同时提供英文的男性化和女性化翻译结果。
检测性别中立查询
许多土耳其语中提到人的句子都是性别中立的，但并不是全部都这样。检测哪些查询符合特定性别的翻译是一个难题，由于土耳其语在形态学上的很复杂，这意味着指代一个人可以是明确的性别中立代词（例如 o，ona）或隐式编码。例如，“biliyor mu？”没有明确的性别中立代名词，可以翻译为“她知道吗？”或“他知道吗？”这种复杂性导致我们不能使用简单的性别中性代词列表来检测性别中立的土耳其语查询，另外我们还需要一个机器学习系统。google 团队估计大约有 10％ 的土耳其语的翻译查询含糊不清，能同时符合女性化和男性化翻译的条件。
为了检测这些查询，他们使用了最先进的文本分类算法(与他们的云自然语言 api 中使用的算法相同)来构建一个系统，该系统能够检测给定的土耳其语查询何时是性别中立的。这就导致在翻译前新增了一个步骤，所以他们必须平衡模型在延迟时的复杂性。google 团队对数千个土耳其人进行系统培训，要求这些人判断出一个给定的例子是否是性别中立的。而他们最终的分类系统是卷积神经网络，以此可以准确检测出需要按性别翻译的查询。
生成特定性别翻译
随后，google 团队增强了基础神经机器翻译（nmt）系统，以便在需要时生成女性化和男性化翻译。当没有要求区分性别时，训练模型生成的是默认翻译。这主要包括：
识别并将平行训练数据划分为具有女性化词语、男性化词语和性别不明词语。
在句子的开头添加一个新增的输入标记，以指定要翻译的所需性别，类似于已构建的多语言 nmt 系统的方式：
o bir doktor→他是一名医生
o bir doktor→她是一名医生
训练增强的 nmt 模型对女性、男性和性别中立数据源的影响。他们对这些来源进行了各种混合比试验，使模型在这三个任务中的表现同样出色。
如果确定用户查询是性别中立的，他们会在翻译请求中添加性别前缀。对于这些要求，他们的最终 nmt 模型可以在 99％ 情况下生成可靠的女性化和男性化性别的翻译结果。此外，系统在没有性别前缀的查询中还能保持翻译质量。
检查准确性
最后的一个步骤决定是否显示特定性别的翻译结果。由于产生男性化翻译的训练数据与产生女性化翻译的训练数据不同，因此在与性别无关的两种翻译间可能存在差异。如果确定特定性别的翻译质量低，则只显示单一的默认翻译。为了确定特定性别的句子翻译质量，他们进行以下验证：
要求的女性翻译是女性化的；
要求的男性化翻译是男性化的；
除了与性别相关的变化，如果女性化和男性化翻译完全相同，即使翻译结果间的措辞发生微小变化也会被系统过滤掉。
男性化和女性化翻译仅在性别方面有所不同，即“he”和“his”与“she”和“her”。因此，他们展示了特定性别的翻译。底部：男性化和女性化翻译在性别方面有所不同，即“he”与“she”。但是，从“really”到“actually”的变化与性别无关。因此，系统将过滤特定性别的翻译并显示默认翻译结果。
如果将所有内容放在一起，输入句子首先会通过分类器，分类器检测它们是否可以进行特定性别翻译。如果分类器说“是”，系统则向增强型 nmt 模型发送三个请求：女性化翻译请求、男性化翻译请求和性别中立翻译请求。最后一步考虑了所有的三个答案，并决定是否显示特定性别翻译或单个默认翻译。google 团队认为，这一步仍然相当保守，为了最大限度提高所显示的特定性别的翻译质量，因此系统的整体召回率仅为 60％ 左右。
对 google来说，这只是他们解决机器翻译系统中性别偏见的第一步，未来，他们计划将特定性别的翻译扩展到更多语言，并解决自动完成查询等功能中的性别偏见问题。此外，他们已经在考虑如何在翻译中解决非二元性别的问题。
霍尼韦尔完成威尔明顿市由经济刺激法案支持的太阳能计划
通过风向风速仪可更好地研究风的变化
诺基亚3、诺基亚5两款入门手机台湾发布 价格亲民
智能巡检机器人开始上岗 保证电网更加安全可靠地运行
Linux系统中如何进行GDB调试
如何为Google翻译上的性别中性词提供女性化和男性化两种翻译结果的技术原理
PbSe量子点被用于制备高性能的光电探测器
安捷伦发表Agilent N6854A-AG1射频传感器网络定位软
高精地图在无人驾驶领域的作用，高精地图与普通导航地图的区别
服务器托管：您的数字业务的稳定基石
oppo和vivo 3000元以下最值得推荐的手机
到2035年，北美LED照明所节省的能源可高达569万亿瓦时
核辐射辐射的是什么？如何防止核辐射？
PCB厂CAM工程师要注意哪些事项
湖南师范大学在DNA纳米传感器用于溶酶体酸化与钾离子流相关性研究取得新进展
沐曦进一步夯实算力基础设施安全底座能力
使用NVIDIA DALI加速医学图像处理
华为Mate40系列发布:支持90Hz高刷新率和240Hz触控采样率
电源线路滤波器电路,带屏蔽层的隔离变压器
Linux在嵌入式系统应用中的探究