OpenAI于9月26日发布了最新的多模态内容审核模型“omni-moderation-latest”,该模型基于GPT-4o技术,能够更精准地识别有害文本和图像内容,尤其在非英语内容的识别上表现突出。此举将显着提升内容审核系统的效率和准确性,为开发者提供更强大的工具,构建更安全的用户环境。 Downcodes小编将带您深入了解这款新模型的优势与特点。
在数字时代,内容安全问题日益严峻,OpenAI推出的“omni-moderation-latest”模型无疑是应对这一挑战的重要一步。该模型支持文本和图像的多模态审核,准确性较以往模型大幅提升,并新增了对违法和暴力内容的检测能力。对于非英语内容,其准确率更是提升了42%,尤其在低资源语言上表现更为出色。模型的优势还在于其免费、易于接入的特点,开发者可轻松将其集成到自身应用中。

新模型的亮点在于,它支持对文本和图像输入进行审核,特别是在处理非英语内容时表现更加出色。
与之前的审核模型相比,“omni-moderation-latest”不仅提高了识别的准确性,还增加了检测更多有害内容的能力。它可以对暴力、自残和性内容等多个类别进行评估,确保用户能够在一个更安全的空间中交流。
OpenAI自2022年推出内容审核API (Moderation API)以来,自动化审核系统需要处理的内容量和种类不断增加,尤其是随着越来越多的人工智能应用进入大规模生产阶段。如今,许多公司,例如Grammarly 和ElevenLabs,都在使用这一API 来保护用户安全,防止不当内容的产生。

新模型的优势体现在多个方面:
首先,它可以进行多模态的有害内容分类,针对图像和文本的组合进行评估,识别暴力残及性相关的风险。
其次,模型新增了两类文本审核,分别是与违法和暴力相关的内容,进一步增强了审核能力。
另外,对于非英语内容的检测,准确度大幅提升测试显示在40语言中的准确率提高了42%,尤其在低资源语言上表现更为突出。

对于开发者来说,这款新的审核模型依旧是免费的内容审核API 可以轻松接入。 OpenAI 希望这项升级能让更多的者利用最新的研究成果和安全系统,为用户创造更加友好的在线体验。
官方博客:https://openai.com/index/upgrading-the-moderation-api-with-our-new-multimodal-moderation-model/
** 划重点:**
? 新模型“omni-moderation-latest” 基于GPT-4o 技术,支持和图像的多模态审核。
? 针对40种语言的检测准确率提升42%,特别是在低资源语言上表现优异
? 新增两类文本审核,了对违法和暴力内容的识别能力。
总而言之,OpenAI 的“omni-moderation-latest”模型在内容审核领域带来了显着的进步,其多模态能力、更高的准确性和对多种语言的支持,将有效提升网络内容安全水平。这对于开发者和用户来说都是一个好消息。 Downcodes小编期待未来OpenAI能带来更多创新技术,共同构建更安全、更健康、更友好的互联网环境。