Появился демоспейс Align3R, можно тестить

Демо

#video2depth #video2pointcloud #video2camera #tracking

Maya

Мультимодальная мультиязычная визуально-языковая модель.
8B параметров. Файнтюн на базе LLaVA.
Силен в культурном контексте.
Русский, Английский, французский, испанский, японский, арабский, хинди

Это то как его нахваливают авторы. В реальности я ему показал свой ужин - он присочинил то чего нет на фото и немного лажанул в русском. Ну в целом годно

Демо

#vlm

Youtube auto dubbing

Youtube прикрутил автоматический дубляж видео. Привет @yabrowser

Чтобы видео было продублировано на другой язык, автор должен включить эту опцию

Пример дулбяж с французского на английский

#news #dubbing #speech2speech

Есть код и демо OneDiffusion - генератора/пониматора картинок

Код
Демо сейчас 404 - ждем
Веса на HF

#text2image #image2image #conditioning #personalization #multiview

SwiftEdit: Lightning Fast Text-guided Image Editing via One-step Diffusion

Редактирование изображений с помощью текстовых команд.
Обучен на SwiftBrush v2 (SBv2) и SD-Turbo

Сохраняет детали и текстуры исходного изображения
Работать быстро, всего за 0,23 секунды на одной видеокарте A100

Код ждем

#imageediting #image2image

Amazon Nova

Видеогенератор от Amazon.
На видео реклама, сделанная в нем

- Amazon Nova Micro - текстовая модель, обеспечивающая ответы с наименьшей задержкой при очень низкой стоимости.

- Amazon Nova Lite - очень недорогая мультимодальная модель, обеспечивающая молниеносную обработку изображений, видео и ввода текста.

- Amazon Nova Pro - высокопроизводительная мультимодальная модель с наилучшим сочетанием точности, скорости и стоимости для решения широкого спектра задач.

- Amazon Nova Premier, наиболее подходящая из мультимодальных моделей Amazon для решения сложных задач рассуждения и для использования в качестве лучшего преподавателя при разработке пользовательских моделей (доступна в первом квартале 2025 года).

- Amazon Nova Canvas - современная модель создания изображений.

- Amazon Nova Reel - современная модель создания видео.

На Amazon Bedrock

#text2video #image2video