Разработка инструмента DIVID для обнаружения deepfakes

Ученые создали инструмент DIVID для выявления deepfakes с точностью 93,7%. Используется метод DIRE для определения подлинности видео. Технология может быть интегрирована в Zoom для обнаружения deepfakes в реальном времени. Команда работает над улучшением платформы для более широкого использования. Runway представил модель Gen-3 Alpha для генерации видео из текста и изображений
Новости 2024 06 26

Улучшение обнаружения ИИ-видео с помощью инструмента DIVID

Инструмент DIVID, разработанный исследователями Columbia Engineering, представляет значительное улучшение в обнаружении видео, созданного искусственным интеллектом. С достоверностью до 93,7%, DIVID позволяет эффективно идентифицировать видео, созданные с применением новейших генераторов, таких как Sora от OpenAI, Runway Gen-2 и Pika, которые используют модель диффузии. Методика, основанная на технике DIRE (ошибка реконструкции DIffusion), позволяет выявлять изображения, созданные диффузионными моделями, и сравнивать их с оригиналом. Это важный шаг в борьбе с фейковыми видеозаписями, поскольку поддельные материалы, созданные ИИ, часто трудно отличить от реальных. Дальнейшее развитие DIVID и его интеграция в популярные видеоконференц-платформы, включая возможность обнаружения фейковых контента в реальном времени, представляют собой перспективный путь в сфере борьбы с дезинформацией и синтетическими контентами.

Инновационная разработка исследователей Columbia Engineering

Инновационная разработка исследователей Columbia Engineering в виде инструмента под названием DIVID открывает новые возможности для обнаружения видео, созданных искусственным интеллектом. Этот инструмент превосходит предыдущие методы обнаружения и возможен благодаря методу DIRE, который позволяет выявлять контент, сгенерированный моделями диффузии, с высокой точностью. DIVID и Raidar представляют инновационные подходы к борьбе с дипфейками и фейковыми текстами, обеспечивая надежную защиту от манипуляций с контентом. Развитие данной технологии открывает перспективы для ее внедрения в реальном времени, в том числе как инструмента для обнаружения фейковых видеозвонков.

Улучшение методов обнаружения ИИ-видео

Инструмент DIVID, разработанный исследователями Columbia Engineering, значительно улучшил методы обнаружения искусственно созданных видеороликов, особенно тех, которые произведены с использованием генеративно-состязательных сетей (GAN). Такие видеоматериалы часто содержат необычные характеристики, такие как аномальное расположение пикселей, неестественные движения и отклонения, которые редко встречаются в реальных видео. С развитием новых методов создания контента, таких как модель диффузии, задача выявления идентификации таких фейков становится все более сложной. DIVID применяет технику реконструкции изображений и сравнения с оригиналом, используя подход DIRE для проверки подозрительных видеоматериалов. Это позволяет более точно отличать созданные ИИ видеоролики от реальных, обеспечивая более надежное обнаружение дипфейков и защиту от поддельного контента.

DIRE (Ошибка реконструкции DIffusion) — это метод, который измеряет разницу между входным изображением и соответствующим выходным изображением, восстановленным с помощью предварительно обученного режима диффузии.

DIVID
На фото: первый столбец: видеокадры взяты с YouTube и фейковые видеоролики, созданные OpenAI из Sora. второй столбец: кадры, восстановленные методом диффузии. третий столбец: различия между первым и вторым столбцами. Как показано, реальные видеокадры больше отличаются от кадров, восстановленных диффузией, чем от видео, созданного диффузией, что является ключевым моментом для DIVID в обнаружении видео, созданного диффузией.
×

Применение метода DIRE для обнаружения изображений, созданных методом диффузии

Исследователи продемонстрировали эффективное применение метода DIRE для выявления изображений, созданных с использованием моделей диффузии. DIRE, ошибка реконструкции DIffusion, позволяет определять различия между начальным и восстановленным изображениями, что помогает выявить уникальные особенности, присущие созданным диффузионными моделями. Этот метод позволяет исследователям обнаруживать артефакты и несоответствия, характерные для изображений, порожденных алгоритмами диффузии. Путем анализа различий между оригинальным и восстановленным контентом специалисты могут эффективно определить, создано ли изображение искусственным интеллектом или человеком. Такой подход позволяет улучшить методы обнаружения фейковых изображений и повысить уровень достоверности распознавания поддельного контента.

Разработка системы Raidar для обнаружения фейковых текстов

Исследователи представили систему Raidar, способную эффективно обнаруживать сгенерированный текст, не требуя доступа к внутренним работам крупных языковых моделей. Этот инновационный инструмент использует языковую модель для перефразирования или изменения заданного текста, а затем анализирует, насколько много изменений внесла модель. Благодаря этой технике, Raidar может различить между текстом, созданным искусственным интеллектом и текстом, написанным человеком. Новаторский подход команды исследователей собрал воедино знания о том, как ИИ обрабатывает и создает текст, открывая новые перспективы в области борьбы с фейковой информацией.

Принцип работы инструмента DIVID

Инструмент DIVID работает на основе принципа реконструкции видео и последующего сравнения его с оригиналом. Этот метод основан на использовании значений DIRE, которые позволяют инструменту подтверждать гипотезу о происхождении видео. Путем анализа различий между видео, созданным искусственным интеллектом, и видео, созданным человеком, DIVID способен идентифицировать уникальные особенности и артефакты, характерные для каждого из них. Это позволяет эффективно выявлять синтетические видеоматериалы, сгенерированные с использованием методов диффузии и других инструментов искусственного интеллекта. Разработчики также рассматривают возможности интеграции DIVID в различные платформы, включая видеоконференции в режиме реального времени и веб-браузеры, чтобы обеспечить доступность и обнаружение фейковых материалов для широкой аудитории.

Перспективы интеграции и развития инструмента DIVID

Исследователи, разработавшие инструмент DIVID, рассматривают перспективы интеграции этой технологии в различные платформы для обнаружения фейковых видеоматериалов. Их целью является создание плагинов, позволяющих обнаруживать синтетические видеоролики в реальном времени, что является важным шагом в борьбе с дезинформацией и цифровыми манипуляциями. Плагин для Zoom уже находится на стадии разработки, что демонстрирует стремление команды к распространению своего продукта среди широкой аудитории пользователей. Планируется также создание плагинов для веб-сайтов и браузеров, чтобы обеспечить доступность инструмента для всех, кто сталкивается с необходимостью проверки подлинности видео контента в онлайн-среде.

Завершающие шаги и последние технологические достижения

Команда по развитию инструмента DIVID в настоящее время активно работает над его совершенствованием, чтобы обеспечить эффективную обработку разнообразных синтетических видео, созданных с использованием доступных открытых инструментов. Это позволит более точно идентифицировать иИ-видео, созданные с использованием современных методик искусственного интеллекта, таких как модель диффузии, применяемая в генераторах видео нового поколения, например, Sora от OpenAI и Gen-2. В параллель с этим разработчики представили модель машинного обучения Gen-3 Alpha, что открывает новые возможности для создания видеороликов на основе текста и изображений. Эти новейшие технологии позволят более эффективно бороться с дипфейками и другими видами синтетических видеоматериалов, повышая уровень безопасности и доверия в онлайн контенте.

Заключение

Работа команды исследователей и разработчиков в сфере обнаружения ИИ-видео и фейкового контента приобретает все большее значение в современном цифровом мире. Инструмент DIVID, с его развитыми технологиями, не только улучшает методы обнаружения поддельного видео, но также открывает новые возможности для обеспечения безопасности и достоверности контента в онлайн среде. Эта инновационная разработка играет ключевую роль в борьбе с дезинформацией и обеспечивает пользователей средствами защиты от манипуляций с визуальным контентом. Стремление команды к постоянному улучшению и совершенствованию платформы DIVID говорит о их амбициозной задаче сделать интернет более безопасным и прозрачным для всех его пользователей.

Поиск