Відтворення 70-річної історії кохання кадр за кадром

«Love, Rendered» — новий короткометражний документальний фільм, що досліджує втрату пам’яті та силу оповіді, а також демонструє, як технології можуть допомогти відродити спогади, які почали згасати. Фільм розповідає про Берта та Етелль Шац, подружжя, яке прожило в шлюбі понад 70 років, поки вони долають когнітивний спад Берта. Серед спогадів, що згасають, є один із їхніх найцінніших: день, коли вони познайомилися в студентському кооперативі в Клівленді. Оскільки його не фотографували й не знімали на відео, цей день існував лише в їхній пам’яті.

Коли я долучився до фільму як технічний керівник, то знав, що цей проєкт буде настільки ж емоційно складним, наскільки технічно комплексним. Втрата пам’яті близька й мені. Мій дідусь переніс інсульт і втратив пам’ять, перш ніж помер. Востаннє я навідав його, коли мені було за тридцять. Він був переконаний, що я досі навчаюся в коледжі, і дуже радів, що я закінчую навчання. Цей гірко-солодкий спогад назавжди залишився зі мною.

Цей досвід підштовхнув мене перевірити, чи може ця технологія допомогти мені глибше взаємодіяти з родиною за допомогою того самого засобу. Коли розпочався цей проєкт, я попросив батька надати старі сімейні фотографії. Я випробував наше відновлення зображень на фотографіях часів знайомства моїх батьків і використав наші відеомоделі, щоб анімувати їх. Спостерігаючи, як мої батьки рухаються у віці трохи за двадцять, я по-справжньому усвідомив, як ці інструменти можуть допомогти зберегти те, що для нас найдорожче.

«Love, Rendered» зняла режисерка, номінована на премію «Оскар», Ліз Ґарбус, яка продюсувала фільм разом із Деном Коґаном і Дарреном Аронофскі. Його створено у співпраці Google DeepMind і Primordial Soup — творчої компанії Аронофскі.

Дослідження таємниці спогадів

Ліз і Даррен прийшли до цього фільму, зацікавлені стійкістю пам’яті. Під час роботи над документальним фільмом «Кома» Ліз побачила, як на фМРТ-сканах спалахувала активність мозку пацієнтів у стані мінімальної свідомості, коли вони чули знайомі голоси або бачили зображення близьких. Через кілька років Даррен натрапив на відеозапис колишньої балерини з хворобою Альцгеймера, яка, почувши «Лебедине озеро», інстинктивно виконала хореографію, сидячи в інвалідному візку.

Ці приклади привели творчу команду до терапії спогадами — клінічної практики використання сенсорних стимулів, як-от пісні, сімейні історії та старі фотографії, щоб активізувати спогади, започаткувати розмови й відновити емоційний зв’язок. Але що відбувається, коли спогад не пов’язаний із такими стимулами?

Щоб відтворити незаписане минуле Берта та Етелль, кінематографісти співпрацювали з моєю командою. Етелль сиділа поруч із нами й стала активною співавторкою, виправляючи вигин сходів або форму підбора взуття.

Відтворення людської сутності за допомогою ШІ

Ми працювали разом із командою Primordial Soup, використовуючи новітні моделі ШІ як мистецький засіб і набір інструментів та спрямовуючи технологію за допомогою людського задуму на кожному етапі.

Для заповнення прогалин у відсутніх деталях потрібен був двоетапний технічний підхід, розроблений для збереження емоційної правди.

• Відновлення зображень: Команда використала генеративні моделі, щоб відновити чорно-білі фотографії Берта та Етелль із часів їхньої молодості. Відновлені фотографії допомогли забезпечити відповідність подальших відтворень їхнім образам.

• Контроль пози й виконання: Інженери використали наші моделі захоплення виконання, щоб відобразити сучасні мікрорухи Берта та Етелль — характерний нахил голови Берта, коротку паузу в його мовленні, ледь помітні зморшки навколо очей. Перенесення цих рис на їхні молодші образи оживило відтворення.

Поєднання цих двох засобів дало нам змогу переплести минуле й сьогодення Берта та Етелль. Так ми створили «спогад», який, за їхніми словами, здавався автентичним.

Подивіться, як моя колега Джесс Ґаллеґос докладніше пояснює цей робочий процес.

Як зазначив Даррен під час виробництва, інструмент — як-от пензлик або молоток — нічого не робить, доки його не спрямовують людські руки. У «Love, Rendered» машинне навчання було інструментом, за допомогою якого ми провели Берта та Етелль крізь час, допомагаючи їм утримати мить, що зникає.

Ви можете переглянути повний фільм тут, щоб пережити їхню історію кохання, кадр за кадром.

Збереження історії вашої родини

Якщо ви хочете налагодити зв’язок із бабусею чи дідусем або зберегти ключові спогади своєї родини, ви можете відновити старі фотографії в застосунку Gemini. Завантажте зображення фотографії та попросіть Gemini: «Чи можете ви відновити й розфарбувати цю фотографію? Збережіть зовнішність, вираз обличчя та позу людей».