Как нейросети оживляют фото: большой разбор и ТОП-3 ИИ. Часть 1
- Words
- 98
- Chars
- 645
- AI summary
- Yes
A person photographed looking straight into the camera poses a challenge for neural networks asked to turn the head by even 30 degrees. The model has to draw in an ear, a cheek and part of the neck that were never captured in the original shot. It has no stored pixels for those areas and invents them itself, drawing on millions of videos it has processed. Sometimes the result is indistinguishable from real footage, and sometimes it is not.
Представьте фотографию, на которой человек смотрит прямо в камеру. Чтобы он повернул голову хотя бы на 30 градусов, нейросети придется дорисовать ему ухо, щеку и часть шеи, которых на снимке нет. Ни одного заготовленного пикселя этих областей у нее нет: она сама их выдумывает, опираясь на миллионы других просмотренных видео. Иногда результат не отличить от реальной съёмки, а порой лицо расплывается, как воск. Разница между исходами почти целиком объясняется тем, как устроена модель и какое фото вы ей дали. В первой части разбора разбираемся, что происходит внутри нейросети, когда она оживляет снимок, и как этим пользоваться. Читать далее
Open article