Последние пару лет активно интересуюсь различными нейросетями и созрела, чтобы открыть здесь тему по этому вопросу. И вот что я вам скажу - хорошо, что в 2009-2012 они не были доступны широким слоям населения, а то мы бы с вами с ума сошли
Нейронная сеть – одно из направлений искусственного интеллекта, цель которого смоделировать аналитические механизмы, осуществляемые человеческим мозгом. Задачи, которые решает типичная нейросеть – классификация, предсказание и распознавание. Нейросети способны самостоятельно обучаться и развиваться, строя свой опыт на совершенных ошибках.
Нейросети — это последовательность нейронов, соединенных между собой синапсами. Структура нейронной сети пришла в мир программирования прямиком из биологии. Благодаря такой структуре, машина обретает способность анализировать и даже запоминать различную информацию. Также нейронные сети способны не только анализировать входящую информацию, но и воспроизводить ее из своей памяти.
Другими словами, нейросеть это машинная интерпретация мозга человека, в котором находятся миллионы нейронов передающих информацию в виде электрических импульсов.
Начну с самой нашумевшей - DeepFake.
Deepfake (дипфейк) — конкатенация слов «глубинное обучение» (англ. Deep learning) и «подделка» (англ. Fake), методика синтеза изображения, основанная на искусственном интеллекте. Она используется для соединения и наложения существующих изображений и видео на исходные изображения или видеоролики. В подавляющем большинстве случаев, для создания таких видео используют генеративно-состязательные нейросети (GAN). Одна часть алгоритма учится на реальных фотографиях определенного объекта и создает изображение, буквально «состязаясь» со второй частью алгоритма, пока та не начнет путать копию с оригиналом.
Deepfake может быть использован для замены определённых элементов изображения на желаемые образы, в частности для создания фальшивых порнографических видео со знаменитостями или для порно-мести[3]. 96% такого рода видео – порнографическое. 99% порнографических дипфейков делаются с участием «звезд»: популярных актрис и певиц. Deepfake-порнография появилась в Интернете в 2017 году, в частности на Reddit и была запрещена сайтами, включая Reddit, Twitter и Pornhub. Deepfake может быть использован для создания поддельных новостей и вредоносных обманов.
Deepfake-ролики можно легко найти на популярных сайтах потокового видео, таких как YouTube или Vimeo. Популярной программой является FakeApp, использующая TensorFlow.
Методы выявления движения и превращения в целевое видео, которое похоже на целевой образ, были представлены в 2016 году и позволяют создавать поддельные мимические изображения в существующем 2D-видео в режиме реального времени[14] . 1 сентября 2020 года компания Microsoft анонсировала свою новую разработку – Microsoft Video Authenticator, программное обеспечение, которое позволяет определить вмешательство в видео. Вики
Ну и как образец, представлю вам несколько роликов:
Исправленная голограмма Майкла
Оригинал, если кто не видел:
Отредактированные кадры из "Майкл Джексон: В поисках Неверленда"
Майкл - Вилли Вонка
Ну и вот вам для разнообразия Фредди вместо Рами Малека
хорошо, что в 2009-2012 они не были доступны широким слоям населения, а то мы бы с вами с ума сошли
да уж)) хорошо, что не было)
Olgeya написал(а):
Исправленная голограмма Майкла
ну эта чуть лучше той, первоначальной, но все равно не он
кстати, Бранка не любит голограмм, хотя и считает их забавными.
Из интервью от января 2021 года:
Бранка: Артисты должны обращать внимание на свое наследие. Они должны подумать при планировании своего эстейта, о том, кого они назначают представлять себя и продолжать свое наследие, и быть очень конкретными в этом вопросе. Вы действительно можете увидеть разницу, например, в эстейте Майкла Джексона и эстейте Принца. И да, отчасти это связано с менеджментом, но на самом деле именно Майкл назначал людей, которые, по его мнению, могли бы справиться с его наследством, в то время как Принс оставил его судам и банку.
Это очень важно, когда я смотрю на некоторых артистов, которых мы представляем сейчас; вероятно, это неплохая идея для исполнителя - подумать о том, как они хотят, чтобы их авторские права были лицензированы [в далеком будущем], как они хотят, чтобы их наследие обрабатывалось, хотят ли они голограммы…
Вопрос:... КСТАТИ ГОВОРЯ, ГОЛОГРАММЫ БЫЛИ ГОРЯЧЕЙ ТЕМОЙ ИНДУСТРИИ В ТЕЧЕНИЕ МИНУТЫ, И ГОЛОГРАММА МАЙКЛА ДЖЕКСОНА ВЫЗВАЛА НАСТОЯЩИЙ АЖИОТАЖ. ЕСТЬ ЛИ у этого БУДУЩЕЕ? НЕ СЛИШКОМ ЛИ ЭТО СЛОЖНО С ТОЧКИ ЗРЕНИЯ ЛИЦЕНЗИРОВАНИЯ?
Бранка: Я не думаю, что речь идет о лицензировании; это не так уж сложно. Я просто не большой поклонник голограмм.
В коротких дозах, таких как голограмма Тупака или голограмма Майкла Джексона, которую мы сделали на Billboard Music Awards [в 2014 году], они мне нравятся – я думаю, что они забавны, они напоминают нам об артистах, и вы чувствуете, что они там с вами. Но как средство развлечения в течение длительного периода времени они просто недостаточно динамичны.
интервью очень большое, не буду все выкладывать. Говорит, что продав доли Майкла в каталогах Сони/АТВ и Эми они получили большую зарплату. Но Майджек обещает не продавать, пока он будет приносить хорошую прибыль.
Про Покидая неверленд говорит, что будут бороться, что Майкл джексон не Харви Вайнштейн, с ним так не получится.
Кстати среди клиентов фирмы Бранки перечислены Барак и Мишель Обама. Хм.
И вот фоточка свеженькая с Байденом. А слева жена Бранки.
ну эта чуть лучше той, первоначальной, но все равно не он
Ну, справедливости ради, качество зависит от нейронной сети и исходника. Вот скажем исправленное видео "Майкл Джексон: В поисках Неверленда" выглядит неплохо, но видно, что исходное фото очень глянцевое и отглаженное. Ну и нейронные сети постоянно обучаются и качество становится всё лучше и лучше )
Фредди вообще огонь получился.
Vikusya написал(а):
кстати, Бранка не любит голограмм, хотя и считает их забавными.
Ну тут не совсем о голограммах речь. Нейросети могут широко использоваться, в том числе и на голограммах. Кстати, про голограммы у нас тоже тема есть: Голография: 3D - виртуальные технологии
Возвращаясь к нейронным сетям, перепощу сюда одну статью.
6 лучших Deepfake приложений и инструментов в 2021 году
Различные методы манипулирования изображениями были введены в 19 веке и позднее применялись к кинофильмам. Эти методы быстро улучшились с цифровым видео. В начале 1990-х годов исследователи из академических институтов разработали технологию Deepfake, которая впоследствии была доработана разработчиками в онлайн-сообществах. В последнее время подделки Deepfake привлекают большое внимание за их использование в финансовых махинациях, розыгрышах и фальшивых новостях. Это заставило правительство и промышленность выявлять и ограничивать их незаконное использование. Тем не менее технология имеет большой потенциал, если ее правильно использовать. Что такое технология Deepfake? Deepfakes относятся к манипулируемому визуальному контенту, генерируемому сложным искусственным интеллектом, который дает сфабрикованные изображения и звуки, которые кажутся реальными. В большинстве случаев, человек в существующем видео или изображении заменяется на чье-то подобие.
Deepfakes создаются с использованием моделей глубокого обучения - подкласса методов машинного обучения, основанных на искусственных нейронных сетях с репрезентативным обучением. Он включает в себя обучение генеративных архитектур нейронных сетей, таких как генеративные состязательные сети или автоэнкодеры. Хотя трудно создать хороший deepfake на обычном компьютере, есть много инструментов, доступных в интернете, чтобы помочь людям сделать достойные deepfakes. Технология все еще находится в зачаточном состоянии, поэтому не ожидайте идеального результата. Мы тщательно собрали несколько хороших deepfake приложений и инструментов, которые не требуют высокого класса рабочего стола с мощными графическими картами (за исключением одного или двух). Вы можете использовать их как в исследовательских целях, так и просто для развлечения, но не нарушайте чью-либо частную жизнь.
6. Doublicat
Платформа: Android / iOS Цена: Бесплатно Doublicat позволяет вам сделать селфи и поместить свое лицо на мем или GIF в своей библиотеке. Это займет около 5 секунд, чтобы ваше лицо было наложено на лицо Брэда Питта, Леонардо Ди Каприо или Тейлора Свифта. Вы будете удивлены, увидев, насколько хорошо ваше наложенное лицо принимает те же выражения, что и оригинал. Вы можете переслать результаты своей семье и друзьям или опубликовать их в Instagram. Вывод будет довольно странным, если будет много движений лица, но в целом это интересный эксперимент. По словам разработчиков приложения, само изображение удаляется с серверов сразу после его обработки. Однако при этом сохраняется представление черт лица.
5. FaceApp
Платформа: Android / iOS Цена: Бесплатно FaceApp разработан российской компанией Wireless Lab. Он использует нейронные сети для генерации высокореалистичных преобразований лиц на фотографиях. Приложение может преобразить ваше лицо, чтобы заставить его улыбаться, выглядеть старше, выглядеть моложе или просто смены пола, а также многих других захватывающих преобразований. Татуировки, виньетки, размытие объектива и наложение фона также являются частью FaceApp. В 2018 году приложение привлекло много внимания со стороны трансгендерных и ЛГБТ-сообществ из-за его реалистичных преобразований гендерных изменений. Он также столкнулся с критикой как в социальных сетях, так и в прессе за конфиденциальность пользовательских данных.
С помощью этого инструмента вы можете создавать deepfake видео в интернете. Однако кривая обучения здесь немного больше, чем то, что вы найдете в других приложениях. Вам нужно зарегистрироваться и загрузить свои видео. Все остальное происходит в облаке, где используются мощные графические процессоры. На изучение видео/изображений и смену лиц уходит почти 4 часа. Вы также можете использовать обученную модель, чтобы менять лица, что занимает около 30 минут. Качество выходного видео зависит от значений "потерь": чем ниже значения потерь (при обучении из загруженных видео), тем выше качество. И, конечно, только вы можете получить доступ к своим видео и учебным данным.
3. DeepFaceLab
Платформа: Windows Цена: Бесплатный DeepFaceLab является ведущим программным обеспечением для создания подделок. Она использует новые нейронные сети для замены лиц в видео. Она размещена на GitHub и породила бесчисленное множество видео в интернете. По словам его разработчиков, более 95% глубоких подделок видео создаются с помощью DeepFaceLab. Его используют несколько популярных каналов YouTube, таких, как Ctrl Shift Face, iFake и Shamook. DeepFaceLab прекрасно работает, но для его использования необходимы технические знания. Как только вы загрузите и разархивируете инструмент, вы увидите множество папок и ряд командных файлов. Существует папка с именем "workspace", которая содержит все обучающие модели, исходные видео и выходные данные. Инструмент работает с определенными именами и местоположениями файлов, чтобы пакетный файл мог функционировать.
2. FaceSwap
Платформа: Windows | MacOS | Linux Цена: бесплатно FaceSwap похож на DeepFaceLab, но предоставляет больше возможностей, лучшую документацию и лучшую онлайн-поддержку. И да, он также доступен на Mac и Linux. Это инструмент с открытым исходным кодом, наполненный функциональностью для выполнения каждого шага процесса Deepfake, от импорта первоначального видео до создания финального видео Deepfake. Чтобы запустить этот инструмент, вам нужна мощная видеокарта, так как замена лица происходит невероятно медленно. Работая на Python, Keras и Tensorflow, Faceswap имеет активное сообщество, поддерживающее и разрабатывающее программное обеспечение. Есть много учебников, которые помогут вам начать работу.
1. Zao
Платформа: Android | iOS Цена: бесплатно Технология глубокой подделки Zao позволяет вам модулировать голоса знаменитостей и накладывать свое лицо на тело актера в сцене. Просто нажмите на одну фотографию и попробуйте тысячи модных причесок, одежды и макияжа. Приложение предоставляет вам множество видеоклипов, нарядов и буквально неограниченные возможности для изучения. В 2019 году Zao за короткое время приобрел значительную популярность, позволив пользователям обмениваться лицами с любимыми актерами в коротких клипах из телепередач и фильмов. За месяц он стал самым загружаемым бесплатным приложением в Китае. С ростом популярности, его разработчики также столкнулись с критикой политики конфиденциальности приложения. Это займет всего несколько секунд, чтобы поменять ваше лицо, но так как алгоритм в основном обучен на китайских лицах, это может выглядеть не так естественно, как вы ожидаете. Тем не менее все эти инструменты демонстрируют, как быстро развивался базовый ИИ: то, что раньше требовало тысячи картинок, чтобы сделать достаточно убедительное глубокое поддельное видео, теперь требует только одного изображения и дает лучшие результаты.
Вот скажем исправленное видео "Майкл Джексон: В поисках Неверленда" выглядит неплохо, но видно, что исходное фото очень глянцевое и отглаженное.
Да, безусловно. И конечно технологии идут вперед и можно сделать абсолютного клона. Только нужно ли? Это ведь художественный фильм. Не факт что всё было именно так, ну тое сть это тоже авторский взгляд сценариста и режиссера. При использовании полной копии, вот как с Томом Крузом или Меркури как то обесценивается оригинал, на мой взгляд. Ну может я и не права. Но соглашусь с Бранкой:
неплохая идея для исполнителя - подумать о том, как они хотят, чтобы их авторские права были лицензированы, как они хотят, чтобы их наследие обрабатывалось, хотят ли они голограммы…
