Головна » Технології / Новини ІТ » MIT розробляє AI-систему, яка додає озвучування на беззвучне відео

Дослідники MIT розробили комп’ютерну систему, яка самостійно додає реалістичні звуки для німого відео. Хоча технологія зароджується, це вже крок до автоматизації звукових ефектів для кінофільмів.




У серії відео, де додано барабанний дріб об різні речі, у тому числі тротуарів, трави і металевих поверхонь — комп’ютер навчився комбінувати належний звуковий ефект, такі як звук удару барабанною паличкою об дерево або шелест листя. Отримані результати є прикладом силою глибокого дослідження, тип штучного інтелекту, застосування якого зараз популярне в наукових колах. З поглибленим вивченням, комп’ютерна система вчиться розпізнавати закономірності у величезних обсягах даних і застосовування, яке вивчає у зручний спосіб. У цьому випадку, дослідники з Массачусетського технологічного інституту інформатики і штучного інтелекту записали близько 1000 відео барабанної палички і ударів по об’єктах з навколишнього світу. Ці відео додавалися у комп’ютерну систему, яка запам’ятовує звуки пов’язані з різними діями і поверхнями. Звук удару барабанної палички по дереву відрізняється, ніж коли неї ворушать купу листя. Після того, як комп’ютерна система мала всі ці приклади, дослідники дали її мовчазні відео одного і того ж удару барабанною паличкою об інші поверхні, і вони доручили системі сполучити відповідний звук з відео. Для цього, комп’ютер вибирає висоту і гучність, що підходить під те, що він бачить на відео, і він знаходить відповідний звуковий кліп у своїй базі даних, щоб програти з відео.

Та все ж дослідники змогли отримати комп’ютер, здатний зробити відповідні звуки тільки тоді, коли вони використовували відео з барабанними паличками. Створення комп’ютера, який автоматично забезпечує кращий звуковий ефект для будь-якого відео — це, можливо, ціла царина, над якою потрібно ще чимало працювати для використання у якихось цілях — наразі технологія залишається поза досяжністю.

Хоча технологічний світ бачив значні успіхи останнім часом в області штучного інтелекту, все ще існують великі відмінності в тому, як люди і машини вчаться. Оуенс хоче наблизити комп’ютерні системи до того, щоб навчити дізнаватися більше так само, як дитина дізнається про світ: фізично вказуючи і підлаштовуючи оточення. Він бачить потенціал у цьому для інших дослідників, щоб використовувати звукові записи і взаємодію з такими матеріалами, як, наприклад, тротуарний цемент в якості кроку для того, щоб машини краще зрозуміли наш фізичний світ.

Якщо Ви знайшли помилку, будь ласка, виділіть фрагмент тексту та натисніть Ctrl+Enter.
Поділитися:

Новини партнерів

Правила коментування

Вітаємо Вас на сайті Pingvin Pro. Ми докладаємо всіх зусиль, аби переконатися, що коментарі наших статей вільні від тролінгу, спаму та образ. Саме тому, на нашому сайті включена премодерація коментарів. Будь ласка, ознайомтеся з кількома правилами коментування.

  1. Перш за все, коментування відбувається через сторонній сервіс Disqus. Модератори сайту не несуть відповідальність за дії сервісу.
  2. На сайті ввімкнена премодерація. Тому ваш коментар може з’явитися не одразу. Нам теж інколи треба спати.
  3. Будьте ввічливими – ми не заохочуємо на сайті грубість та образи. Пам’ятайте, що слова мають вплив на людей! Саме тому, модератори сайту залишають за собою право не публікувати той чи інший коментар.
  4. Будь-які образи, відкриті чи завуальовані, у бік команди сайту, конкретного автора чи інших коментаторів, одразу видаляються. Агресивний коментатор може бути забанений без попереджень і пояснень з боку адміністрації сайту.
  5. Якщо вас забанили – на це були причини. Ми не пояснюємо причин ані тут, ані через інші канали зв’язку з редакторами сайту.
  6. Коментарі, які містять посилання на сторонні сайти чи ресурси можуть бути видалені без попереджень. Ми не рекламний майданчик для інших ресурсів.
  7. Якщо Ви виявили коментар, який порушує правила нашого сайту, обов’язково позначте його як спам – модератори цінують Вашу підтримку.

Схожі новини

Новини ІТ

Скільки паперу зекономили українці в 2021 році, скориставшись е-підписом понад 8.7 млрд разів

За 2021 рік українці скористалися е-підписом та е-печаткою 8.7 млрд разів, з яких понад 1 млрд – Дія.Підписом. Це удвічі більше, ніж позаминулого року. «Якщо поставити уявні пачки невикористаного паперу, то вийде башта заввишки щонайменше 870 км. Це як до українського супутника Січ-2-30 і ще 21 Еверест або просто 98 Еверестів. Ось такі результати paperless, […]


Новини ІТ

Розділи відео у YouTube можна буде відтворювати по колу

У травні 2020 року компанія Google додала нову функцію в YouTube, яка називається Розділи. Як вже зрозуміло з назви, відео можна розділяти на певні частини, щоб користувачі могли швидко переходити до потрібної їм ділянки відео. Ця функція достатньо корисна та потрібна глядачам YouTube, оскільки не потрібно витрачати час для пошуку необхідної їм інформації. Особливо, якщо […]


Новини партнерів

Повідомити про помилку

Текст, який буде надіслано нашим редакторам: