Denis Sexy IT 🤖
Denis Sexy IT 🤖

Я как-то пропустил, на той неделе появилось целых два клевых алгоритма которые работают со звуком.

✨Инженеры компании Dessa опубликовали видео работы алгоритма RealTalk, где был синтезирован голос Джо Рогана (автор самого популярного подкаста мира) – послушайте качество, это как DeepFake но уже для голоса.

https://youtu.be/DWK_iYBl8cA
Ха-ха, офигенно. Офигенно страшно.

Алгоритм просто «прочитал» текст, то есть это уже рабочий text-to-speech.

Инженеры не выкладывают исходный код алгоритма, так как считают, что это довольно опасно – но мне кажется это лишь вопрос времени пока кто-то его повторит и выложит на github, один фиг в будущем придется как-то дополнительно проверять тех кто вам позвонил, так как при обладании достаточным датасетом, можно будет скопировать любой голос. В будущем не занимайте кому-то денег по телефону, в общем.

✨Google показал немного похожий алгоритм – вы отправляете Google-переводчику какое-то аудио на иностранном языке, а в результате он «синтезирует» переведенную версию фразы, но с вашим голосом. Это все пока только исследования, вот тут больше деталей и примеры.

RealTalk: We Recreated Joe Rogan's Voice Using Artificial Intelligence

NEW: The latest phase of our work raising public awareness with deepfakes it out, this time featuring a hyper-realistic deepfake of Joe Rogan that combines audio and video. Check it out here: https://youtu.be/i7QNUZWS6VE Check out The New York Times' coverage of this work in their television show The Weekly: https://www.nytimes.com/2019/11/22/the-weekly/deepfake-joe-rogan.html This video and the model that it demonstrates was created by three Machine Learning Engineers at Dessa (Hashiam Kadhim, Rayhane Mama, Joseph Palermo). Learn more: Part 1 of our blog on RealTalk discusses the importance of raising awareness about speech synthesis and its societal implications: https://medium.com/@dessa_/real-talk-speech-synthesis-5dd0897eef7f Part 2 of our blog takes a look under the hood of RealTalk and provides a technical overview of how it works: https://medium.com/dessa-news/realtalk-how-it-works-94c1afda62f0 The RealTalk system was developed on Foundations Atlas, Dessa's product for rapidly training, testing…
| YouTube