Naukowcy z Politechniki Warszawskiej pomogli stworzyć serial dla BBC America. Wykorzystano innowacyjną metodę

- Aplikacja Comixify pomogła w pracach nad serialem "The Watch" na podstawie książek Terryego Pratchetta - pochwaliła się Politechnika Warszawska. Początkowo Comixify była aplikacją do przekształcania filmów i zdjęć w komiks, obecnie jest to również Platforma VFX wspierająca postprodukcję wideo, stworzona i rozwijana przez zespół związany z Wydziałem Elektroniki i Technik Informacyjnych Politechniki Warszawskiej.

Zajmujące się postprodukcją serialu brytyjskie studio Lola Post Production skorzystało z technologii transferu stylu, czyli ze specjalnych filtrów, które aplikują konkretny rysunkowy styl animacji na nagrane wideo. Wystarczy przesłać film lub zdjęcia, wybrać styl i oglądać wygenerowaną w ten sposób animację.

– Opracowaliśmy własną technologię transferu stylu (Style Transfer), opartą na uczeniu maszynowym (Deep Learning Generative Adversarial Networks) – wyjaśnia Paweł Andruszkiewicz – jeden z twórców Comixify, absolwent Wydziału Elektroniki i Technik Informacyjnych. – W ten sposób jesteśmy w stanie stworzyć styl inspirowany danym artystą na podstawie reprezentatywnych namalowanych lub narysowanych prac. Następnie możemy zastosować ten styl w dowolnej sekwencji wideo, zachowując przy tym najwyższą jakość - dodaje.

Efekty współpracy zespołu Comixify i Lola Post Production można podziwiać w dwóch odcinkach „The Watch” – piątym i szóstym. Transfer stylu wykorzystano m.in. do komiksowego przekształcenia czarodzieja i stylizacji kadrów archiwalnego filmu, który oglądają bohaterowie.

Lola Post Production, poszukując najnowszych technologii, które optymalizują koszty postprodukcji wideo, bardzo szybko doceniła oferowany przez Comixify.ai Style Transfer. Po rozmowach z Lola Posta i BBC America finalnie ustalono, że technologia zostanie wykorzystana do modyfikacji treści w odcinkach pierwszego sezonu serialu. Na potrzeby BBC America wykorzystano przeszło 25 000 klatek, które zostały przestylizowane w Platformie VFX. Producenci skorzystali z istniejących stylów i dodali drobne modyfikacje w procesie finalnej postprodukcji.

Sama praca na platformie jest niezwykle intuicyjna, a dziesięciosekundowy materiał zostaje przekształcony w mniej niż 120 sekund.

Serial „The Watch” to policyjny dramat fantasy inspirowany serią książek „Świat Dysku” Terry’ego Pratchetta, osadzony w fikcyjnym mieście Ankh-Morpork. Pierwszy sezon ma 8 odcinków. Każdy z nich skupia się na innej zagadce rozwiązywanej przez Straż Miejską dowodzoną przez Samuela Vimesa. Premiera serialu odbyła się 3 stycznia 2021 roku.