"Vindem ROBOT Phone în pierdere şi facem experimente cu ARRI pentru Magic-uri mai bune!" Interviu cu mai marii HONOR Imaging

După evenimentul de lansare HONOR Robot Phone ţinut în Chengdu, am avut ocazia să mergem până în Shenzhen, la sediul companiei şi să vorbim cu câţiva oficiali din zona de Imaging. Practic, creierele care au pus la punct colaborarea cu ARRI şi au implementat optica pe Robot Phone. Şi am aflat că HONOR e dispusă să vândă în pierdere prima generaţie de Robot Phone, doar ca să se perfecţioneze în filmarea cinematică ARRI şi să o aducă pe Magic-uri. Ce altceva am mai aflat din interviu descoperiţi şi voi mai jos.

Am discutat cu Tracy Yang, HONOR Imaging Technology Expert, dar şi cu Weilong Hou, Imaging Technology Expert. Nu a fost interviu one on one, ci mai degrabă un interviu de grup cu toate ţările prezente, precedat de un discurs care explica naşterea şi scopul colaborării dintre HONOR şi ARRI.

Ce am aflat din prezentare?

ARRI vine cu un secol de tehnologie a imaginii şi camere legendare. Suntem în era fotografiei computaţionale şi am cam ajuns la limitele lentilelor, prismelor şi mecanismelor optice sau de stabilizare. Secretul e acum în ISP, în procesarea imaginii, la un nivel cât mai avansat. Hardware-ul stabilea până acum pragul maxim al calităţii imaginii, dar acum algoritmii oferă saltul la nivelul următor. 

HONOR şi ARRI îşi doresc ca fiecare om, oricât de talentat sau priceput sau nu la fotografie şi filmare să poată realiza capturi cu emoţie, poveste şi feeling cinematic. 

Pentru 2027, HONOR vrea să creeze un ecosistem, să participe la design de senzori foto, să aibă ISP propriu şi ecosistem de imagine propriu. AiMAGE implică 3 elemente:

• arhitectura de senzor, pipeline de procesare AISP şi puterea de procesare nativă
• modulele hardware, la pachet cu algoritmii de procesare în timp real, plus percepţie şi control
• amplificarea calităţii imaginii, agenţi inteligenţi şi tool-uri creative

Compania vrea să reconstruiască pipeline-ul de imagine şi să upgradeze tehnologia senzorului pentru captură. AISP-ul său Nativ îi va permite un control mai mare asupra opticii şi o sinergie mai bună între cip şi algoritm. HONOR ne-a prezentat şi o tehnologie care va duce la crearea unor senzori capabil să "spargă" lumina în culori primare. E vorba despre un router "super vertical waveguide light splitting". 

Plus încă un cip EVS Multimodal, care va schimba comportamentul clasic al ISP-urilor şi va face imaginile mai dinamice. Hardware-ul implică gimbal, senzor, componente optice, iar algoritmii se ocupă de stabilizare, reducere de zgomot şi procesare a imaginilor. 

Compania e totuşi realistă şi ştie că o optică de calitate va fi mereu superioară a ceea ce produce AI-ul. AI-ul poate doar amplifica ceea ce produce hardware-ul. HONOR caută lentile care suprimă reflexiile, corectează aberaţiile cromatice şi alege suprafeţele cu cea mai bună reflexie şi refracție. Plus prisme eficiente şi compacte pentru zoom optic periscopic. 

AI/Cloud/Algoritmi

Algoritmii? Ei se ocupă cu maparea de tonalităţi de culoare, captura AI RAW, analiza cerului înstelat, optimizarea tonalităţilor de piele pentru Portrait, randarea de Bokeh natural, înfrumuseţarea cu fidelitate înaltă. Plus detecţie facială şi a scenelor, motion tracking şi recunoaştere a gesturilor. În fundal se petrece un calcul intens, cu multiple fire de execuţie şi core scheduling avansat. 

Cloud-ul e vital pentru companie şi procesare de imagine. E o combinaţie aici de Cloud RAW Domaing, Imagine Agent şi Spatial Imaging. Cloud RAW Domaing Image aduce un model RAW dedicat, care oferă reconstrucţie din multiple frame-uri pentru a ajunge la o imagine ideală.

Plus amplificarea detaliilor telephoto şi restaurare a capturii low light întunecate. Fotografiile 3D Spaţiale, reconstruirea mediului din jur în filmările one take şi mişcările de cameră a la Hollywood sunt ajutate de aşa numita Spatial Imaging Technology Matrix. Imaging Agent 2.0 devine un soi de asistent de creaţie, care se ocupă de retuşări, colorizare şi recunoaştere de scene. 

Robot Phone 

Pentru stabilizarea cu gimbal se foloseşte un mecanism pe 3 axe pe Robot Phone, cu un motoraş proprietar BLDC. Există şi un algoritm Sensor Fusion Control. Toate la pachet cu un IMU de înaltă precizie, pe 6 axe, cu frecvenţa de sampling mai mare şi cu detecţie a traiectoriei la nivel de milimetru. Un motoraş ultracompact se ocupă cu răspunsul la milisecundă pentru focalizare şi precizie a controlului când foloseşti telefonul. 

Ce aduce special? Decodare LogC3, care reproduce scenele realist şi păstrează cât mai mult dynamic range posibil. Apoi avem fişierele 3D Lut, pentru randare fotografică, look plăcut, contrast crescut, cu roll off în umbre şi highlight-uri. Plus colorizare digitală ajustabilă. Avem şi o zonă dedicată ARRI Cinema Mode în aplicaţia Camera, cu profiluri speciale, inspirate de marii regizori şi camerele Alexa.

Cele două companii au creat şi un laborator împreună, care se ocupă cu revoluţii la nivel de optică, dynamic range, workflow cinematic şi AI cinematografic. 

Ce am aflat din sesiunea de întrebări cu jurnaliştii?

În primul rând ca telefoanele HONOR Robot Phone nu vin în Europa şi nu se lansează global. Că sunt 400.000 de precomenzi şi vor fi produse sute de mii de unităţi, poate un milion. Telefonul e vândut în pierdere şi va fi un experiment care îl face pe Magic9 mai bun, şi el aducând tehnologie ARRI. 

Legat de securitate, procesarea de date legate de persoane, recunoaştere facială, face tracking se face doar pe device, deci nu există îngrijorări cu privire la securitate. 

Am aflat şi că nici Apple, nici DJI nu se pot lăuda cu standardele cinematografice ARRI, aşa cum o face HONOR acum. Plus interconectarea cu ORICE echipament de la Hollywood, ceva ce iar rivalii nu pot face. Adică poţi duce footage-ul filmat cu Robot Phone într-o cameră de editare de film Avengers sau Dune fără probleme. 

Există şi un avantaj, de care ARRI se bucură. Camerele lor Alexa sunt gigantice şi acum au şansa de a-şi vedea tehnologie pe un dispozitiv portabil, cu gimbal rotativ şi care le dă şansa să îl pună pe maşini F1, oameni care aleargă şi în alte situaţii dinamice. Asta face şi mai ieftin procesul de realizare a unui film. Camerele Alexa au zeci de kilograme şi costă zeci de mii de euro. 

Plus că e şi aspectul mişcărilor de rotire. E mult mai anevoios să roteşti un rig uriaş de cameră decât un gimbal responsiv ca Robot Phone. Colaborarea cu ARRI a adus şi noi standarde mai stricte pentru cei de la HONOR, când vine vorba de calitatea imaginii. Nu mai există compromisuri acum, iar ARRI nu îşi pune logo-ul pe ceva care nu arată impecabil. În special când vine vorba de stabilizare, spre exemplu. 

Dacă filmezi în 4K 60, atunci trebuie să fie MEREU 4K 60 FPS. Uneori mai scădea frame rate-ul la 30 sau 40 FPS, mai ales dacă telefonul era încins sau prea solicitat. Odată cu ARRI apare o OBLIGAȚIE să ţii mereu standardul sus. 

AI-ul antrenat de ARRI şi Honor se ocupă cu "denoising", adică scoate zgomotul din capturile noastre. Dar fără senzaţia de sharpness artificial şi exagerat.  HONOR a observat şi că multă lume nu ştie să facă mişcările ideale de cameră când filmează, de aici şi nevoia de gimbal. AI Subject Tracking şi Object Tracking ajută şi ele pentru a ţine focusul pe subiecţi şi a ţine mişcarea naturală. 

LOG C3 şi filtrele ARRI sunt utile inclusiv pentru cei care nu sunt creatori profesionişti. Rezultatul e mai natural, mai cinematic, cu imagine de calitate, chiar dacă nu eşti expert în cinematografie. Ideea este de a te exprima în mod cât mai iconic. 

Trebuie totuşi spus că publicul ţintă principal pentru Robot Phone este creatorul de conţinut. Avem şi un teaser în această conferinţă şi anume că Magic9 ar putea aduce atât un mod ARRI, cât şi un "Low Mode" pentru utilizatorul de rând, mai amator şi care să simtă experienţă cât mai intuitiv şi facil, fără să se complice. 

Având în vedere câţi GB ocupă filmările cu LOG C3 şi profilurile ARRI, un jurnalist a întrebat şi cum stăm cu stocarea, pentru că e criză acum de memorie şi nu prea ai spaţiu de stocare. Astfel, jurnalistul a întrebat dacă HONOR va inventa vreun nou tip de compresie, vreun standard nou, cum face Samsung cu APV Codec sau Sony. Deocamdată HONOR nu lucrează la aşa ceva, dar laudă APV-ul pentru compresie, mai ales faţă de Pro Res folosit de Apple. Selecţia de Bitrate (High, Medium, Low) te mai ajută să faci economie de spaţiu. Ai şi H.264 dacă vrei să faci economie. 

HONOR nu se consideră jucător aşa mare pe piaţa camerelor încât să genereze o compresie nouă. Preferă să ofere mai multe opţiuni de captură. Lucrează şi la un soi de cloud storage sau soluţie NAS, care să compenseze spaţiul ocupat. 

Când un jurnalist a întrebat "când vor ajunge telefoanele să filmeze precum camerele profi?", au fost citaţi regizori şi creatori de conţinut din China. Un regizor a spus că încă nu suntem acolo, dar ca un companion, un device de gen e excelent. Clar poate fi integrat în workflow-ul unui regizor. Accesibilitatea e un mare avantaj, pentru cineaştii la început de drum. Plus portabilitatea şi faptul că pot partaja imediat contentul în social media. 

Inclusiv Weilong Hou spune că îşi foloseşte în continuare DSLR-ul, dar golul dintre telefoane şi camere profi se va reduce dramatic în următorii 2 ani. 

Concluzii

Din acest interviu şi Q&A am înţeles că e mare lucru şi mare realizare şi să colaborezi cu ARRI. Îţi ridică imediat pretenţiile şi standardele pentru filmările tale, nu e doar un logo pentru marketing. Iar ROBOT Phone e vândut în pierdere, la preţ mic pe piaţa din China, pe la 1281 de euro, doar pentru a obţine o bază mare de unităţi de test, care vor duce la un Magic9 şi Magic10 cu ARRI şi mai reuşite la captură. 

Dezideratul HONOR e să ia experiența complexă a colorizarii ARRI, a filtrelor şi a codecului LOG C3 şi să ne ofere şi un mod intuitiv de captură pentru toată lumea. Suntem la generaţia 1.0 şi se pun bazele unei serii, cu reverberaţii în toată industria. Dacă o companie ca HONOR împinge standardul de captură cinema în sus, atunci toţi rivalii vor trebui să o facă.