Roblox теперь использует ИИ-модерацию, чтобы блокировать вредоносный контент до того, как он дойдет до вас.
Roblox усиливает свою безопасность с помощью новой системы модерации на основе ИИ
Если вы когда-либо играли в Roblox, вы знаете, насколько дикой и непредсказуемой может быть эта платформа. Теперь Roblox использует эту непредсказуемость как повод для полной переработки своей модерации контента.
Платформа только что запустила систему модерации на основе ИИ в реальном времени, которая не просто проверяет отдельные случаи, но и сканирует целые игровые сцены в реальном времени, чтобы поймать контент, который прошел через предыдущие фильтры.
Как работает новая система модерации ИИ Roblox?
В отличие от старых инструментов модерации, которые оценивают один объект за раз, новая многомодальная система оценивает всю сцену, включая аватары, текст и 3D-объекты, чтобы определить, нарушает ли полная комбинация Стандарты сообщества Roblox.
Например, представьте, что кто-то использует инструмент свободного рисования, чтобы нарисовать оскорбительный символ — тот, который не вызовет проверку отдельного элемента, но явно является проблемой в контексте.
Когда в одном игровом экземпляре обнаруживаются повторяющиеся нарушения, система отключает только этот сервер, а не всю игру. С момента запуска примерно 5000 серверов отключаются каждый день.
Roblox стремится к мониторингу 100% игрового времени с помощью этой системы. Кроме отключения серверов, она также разрабатывает инструменты для идентификации и удаления отдельных плохих актеров, не портя при этом опыт для всех остальных.
Что это значит для создателей Roblox?
Создатели тоже не остаются в неведении. Новая диаграмма внутри существующей панели управления создателей теперь показывает, сколько ваших игровых серверов было отключено в любой данный день из-за плохого поведения пользователей.
Рост этого числа может сигнализировать о проблеме, требующей расследования, давая создателям возможность пересмотреть и скорректировать такие вещи, как пользовательские эмоции или инструменты для строительства в игре, прежде чем ситуация ухудшится.
Новая программа сертификации для очистки онлайн-игр
Roblox также решает более широкую проблему в индустрии. Вместе с Keyword Studios и Riot Games она совместно разрабатывает Программу лидерства DLC для онлайн-менеджеров сообществ и модераторов.
Исследователь-психолог Рэйчел Ковер, которая является директором исследований в Games for Change, возглавляет академическую сторону. Цель состоит в том, чтобы создать стандартизированное, основанное на доказательствах обучение для людей, управляющих игровыми сообществами, чего индустрия никогда не имела ранее.
Roblox также уже некоторое время усиливает свою сеть безопасности, от родительских контролей до фильтров чата по возрасту, и последнее обновление является самым амбициозным шагом на сегодняшний день.
Другие статьи
Roblox теперь использует ИИ-модерацию, чтобы блокировать вредоносный контент до того, как он дойдет до вас.
Новая система модерации AI в Roblox сканирует целые игровые сцены в реальном времени, выявляя вредоносный контент, который большинство старых систем полностью пропустили бы, и уже закрывает 5,000 серверов ежедневно.
