Site icon Pingvin.Pro

Новий штучний інтелект Facebook здатен напряму перекладати тексти 100 мовами

штучного інтелекту в Україні / штучний інтелект Facebook

Компанія Facebook анонсувала новий штучний інтелект. Його особливість полягає у тому, що він зможе здійснювати прямі парні переклади між 100+ мовами. Іншими словами, ШІ зможе перекладати тексти без застосування англійської мови, як допоміжної.




Більшість перекладачів спочатку перекладають тексти англійською, і лише потім іншою мовою. Але через це дуже часто втрачається точність деяких елементів тексту. Новий штучний інтелект Facebook зможе здійснювати двонаправлені переклади (наприклад з італійської на японську і навпаки) без використання англійської. За оцінкою BLEU (алгоритм оцінки якості перекладеного тексту) якість цього перекладу на 10 балів вища, ніж з використанням англо-орієнтованої моделі.

Для створення свого штучного інтелекту, Facebook застосувала сервіс CommonCrawl для збору текстових прикладів по всій мережі Інтернет. Потім, розробники проаналізували весь матеріал за допомогою системи FastText, яку компанія створила кілька років тому. В результаті вдалося сформувати базу даних з 7.5 млрд пропозицій, які система використовує для перекладу.

Яке число мов у подальшому буде використовуватися і коли система буде впроваджена у соцмережу, наразі, невідомо. Все залежатиме від ресурсів, які виявляться в розпорядженні системи. Для основних мов, як-от індійська, китайська або німецька, багато матеріалу, бо ними публікується безліч текстів в Інтернеті. Набагато більше проблем з мовами на кшталт Зулу, які не настільки поширені.

Компанія надасть міжнародній дослідницькій спільноті набір даних і моделей роботи у вигляді відкритого вихідного коду. Коли систему впровадять в повсякденну роботу соцмережі, поки неясно.