Технологія продовжує зростати семимильними кроками, спираючись на кілька областей для вивчення нових можливостей і функцій. Одна з них - вміти «реконструювати» обличчя людини через фрагмент голосу.
Дослідження Speech2Face ,представлене в 2019 році на конференції Vision and Recovition Patterns, показало, що Штучний інтелект (AI) можерозшифрувати зовнішність людини за допомогою коротких аудіосегментів.
У статті пояснюється, що метою дослідників Те-Хён Он, Талі Декель, Чангіля Кіма, ІнбарМосері, Вільяма Фрімена та Майкла Рубінштейна програми досліджень і науки MIT є не реконструкція обличчя людей однаково, а зробити образ з фізичними характеристиками, які пов'язані з проаналізовано аудіо.
Щоб досягти цього, вони використовували, розробили та навчили глибоку нейронну мережу , яка проаналізувала мільйони відео, знятих з YouTube, де люди розмовляють. Під час навчання модель навчилася співвідносити голоси з обличчями, дозволяючи створювати зображення з фізичними ознаками, схожими на ораторів, включаючи вік, стать та етнічну приналежність.
Тренінг проводився під наглядом та з використанням узгодження облич та голосів інтернет-відео, без необхідності моделювати детальні фізичні характеристики обличчя.
Вони детально розповіли, що оскільки це дослідження може мати аспекти, чутливі до етнічної приналежності, а також приватності, це те, що до відтворення облич не додано жодних конкретних фізичних аспектів, і вони запевняють, що, як і будь-яка інша системамашинного навчання, вона з часом покращується, оскільки при кожному використанні збільшує свою бібліотеку знань.
Хоча показані тести показують, що Speeech2Face має велику кількість збігів між обличчями та голосами, він також мав деякі недоліки, де етнічна приналежність, вік чи стать не відповідали використовуваному вибірці голосу.
Модель призначена для представлення статистичних кореляцій, які існують між рисами обличчя з голосом. Слід пам'ятати, що AI вивчили через відео YouTube, які не представляють реальної вибірки населення в світі, наприклад, в деяких мовах він показує розбіжності з даними навчання.
У цьому сенсі саме дослідження рекомендує наприкінці своїх результатів, щоб ті, хто вирішив дослідити та модернізувати систему, розглянути ширший вибірку людей та голосів, щоб машинне навчання мало ширший репертуар відповідності та відтворення облич.
Програма також змогла відтворити голос у мультфільмах, які також мають неймовірну схожість з голосами проаналізованих аудіо.
Оскільки ця технологія також може бути використана для зловмисних цілей, відтворення обличчя залишається максимально наближеним до людини і не дає повних облич, оскільки це може бути проблемою для конфіденційності людей. Тим не менш, дивно, що технологія може зробити з аудіо зразків.
ПРОДОВЖУЙТЕЧИТАТИ:
Más Noticias
Donald Trump anunció que Israel y Hamas llegaron a un acuerdo para un intercambio de rehenes por prisioneros
Se trata de la primera fase del plan presentado por el presidente estadounidense que contempla el regreso a casa de los 47 secuestrados por los terroristas y la liberación de una lista de palestinos encarcelados en territorio israelí
Deuda colombiana que querían pagar los árabes y Pablo Escobar es cada vez más alta: Gustavo Petro la llevó a otro récord
El crecimiento de las obligaciones internacionales refleja una tendencia ascendente desde el año 2000, con especial énfasis en los últimos cinco años
Representante que supo acompañar a James Rodríguez, Cristiano Ronaldo y Falcao García guiará a figura de la Liga Betplay
El poderoso empresario portugués fijó sus ojos en una de las grandes promesas del fútbol profesional colombiano, que ya es uno de los delanteros más destacados del torneo local
Tripulante peruana de la Flotilla Global Sumud narra intercepción de barco hacia Gaza: “Nos tuvieron 12 horas en el suelo”
La embarcación ‘Adara’ fue uno de los barcos de la Flotilla Global Sumud interceptados por fuerzas israelíes en el Mediterráneo. La misión buscaba romper el bloqueo a Gaza y entregar ayuda humanitaria a la población de la Franja
Gustavo Salcedo vigilaba e intervenía los teléfonos de Christian Rodríguez y Maju Mantilla mientras era ampayado con otra mujer en el Westin
El empresario fue grabado admitiendo que rastreó los teléfonos y autos de su esposa y productor, mientras ocultaba su propio ampay con Mariana de la Vega.
