Pymetrics开源公平性感知机器学习算法Audit AI

Pymetrics是一件专注于向企业提供招聘服务的初创企业。最近，Pymetrics在Github上开源了企业使用的偏差检测（bias detection）算法，称为“Audio AI”。Audit AI用于降低存在于训练数据集中的判别模式。这些判别模式会改进或影响机器学习算法在选取总体上的概率。

\\

现在，越来越多的工作任务借助于机器学习实现过程自动化。重要的是应确保这些算法不会产生可从中不当受益的偏差。Pymetrics一直致力于确保机器学习算法的公平性。

\\

\

我们研究的总体目标，就是提出一种合理的考虑问题方式，使机器学习算法更公平。即便识别了训练数据集中存在的偏差，使用该训练集训练的机器学习算法并不足以解决其中的判别问题。当前，越来越多的决策使用人工智能自动做出。人们需要理解并识别算法的公平或偏差程度，这是朝正确方向迈出的一步。

\

\\

企业对多样性的关注与日俱增。一些人担心算法学习偏差的方式事实上可能会破坏这些多样性努力。最近，法国宣布希望成为能在国际舞台占有一席之地的人工智能强国。今年三月，法国总统Emmanuel Macron发布了人工智能国家战略，其中包括在未来五年内支出18.5亿美元，发展可与硅谷和中国竞争的生态系统。总统做出如此层次的AI投资，这无疑是经过了仔细的考虑：

\\

\

我认为AI完全可能危及民主。例如，我们正在使用人工智能来组织学生访问大学，对算法委以重任。很多人认为算法是一个黑箱，他们并不明白选取学生的过程是如何发生的。但当他们开始明白这依赖于某种算法时，算法就具有了