Pictures e vídeos são uma parte integrante de qualquer rede social, mas estes meios de mídia também vir a ser os principais autores de notícias falsas e discurso de ódio. Para minimizar o impacto de mídias tão prejudiciais, empresas como o Facebook usam ferramentas automatizadas.
Em um post recente , o Facebook descreveu um novo sistema de aprendizado de máquina capaz de identificar texto em vídeos e imagens e transcrever o texto em um formato legível por máquina.
Chamado de Rosetta, este sistema vai um passo à frente da tradicional técnica de reconhecimento óptico de caracteres (OCR), pois faz esforços para entender o contexto da imagem e do texto juntos.
A empresa usou um bilhão de imagens e vídeos públicos do Facebook e Instagram para treinar seu modelo de reconhecimento de texto. O processo geral envolve duas etapas de detecção de uma região retangular que pode conter texto e, em seguida, realizar o reconhecimento de texto usando uma rede neural convolucional (CNN).
O modelo não se limita apenas ao texto em inglês; Ele também suporta diferentes idiomas e codificações, incluindo hindi e árabe.
A Rosetta já foi amplamente integrada a vários produtos no Instagram e no Facebook. A empresa diz que está usando o mesmo para melhorar a pesquisa de fotos, exibir conteúdo personalizado e identificar conteúdo de incitação ao ódio em diferentes idiomas.
