A Wikipedia aprendeu a detectar automaticamente edições incorretas de artigos usando a IA

Fonte: Wikimedia A

enciclopédia online Wikipedia recebeu uma nova ferramenta - um serviço com elementos de IA que ajudará a detectar automaticamente edições incorretas dos materiais de recursos. O serviço ORES (Serviço de Avaliação de Revisão Objetiva) verificará todas as edições em busca de spam ou trolling. O criador do ORES é a Wikimedia Foundation. Os desenvolvedores dizem que o novo serviço funciona como óculos de raio-x (daí a foto do anúncio. O sistema agora destaca tudo que parece suspeito e o envia ao editor humano para verificação. Se o administrador decidir não usar a edição, o usuário que o propôs receberá uma notificação Este sistema é mais fácil de usar, pois nenhuma notificação está sendo enviada aos usuários no momento.

A equipe da enciclopédia ensinou o sistema a distinguir entre edições não intencionais e o que é chamado de "edições prejudiciais". O treinamento foi realizado em exemplos de materiais reais. Agora o novo serviço já pode ser usado.

Um exemplo do serviço é mostrado abaixo. Ele demonstra como os editores veem os materiais (à esquerda) e o que o ORES vê (à direita). A probabilidade de o texto ser normal é 0,0837. A probabilidade de dano intencional ao texto é 0,9163. Como resultado, o editor humano entende que eles realmente tentaram arruinar o texto. De fato, a frase “Lhamas crescem em árvores” não pode ser chamada de edição correta.

ores.wmflabs.org/scores/enwiki/damaging/642215410



E aqui está um exemplo da avaliação do "fator humano"

ores.wmflabs.org/scores/enwiki/damaging/638307884



Esta não é a primeira ferramenta desse tipo que funciona em benefício da enciclopédia on-line. Anteriormente, esses sistemas também tentavam ensinar como trabalhar, mas os serviços antigos não viam a diferença entre “edição prejudicial” e um erro humano comum.

O tempo médio de análise de texto é de cerca de 100 milissegundos. Agora suportado por 14 idiomas. Já realizou 45 milhões de avaliações. Isso não é tanto, já que o número de edições do Wiki por dia chega a meio milhão. O novo serviço ajudará os editores a avaliar rápida e eficientemente todas as edições oferecidas pelos usuários.

Source: https://habr.com/ru/post/pt387355/