Apple testează DarkDiff, un sistem AI care ar putea revoluționa pozele făcute noaptea cu iPhone-ul

2.185 ori
<b>Apple testează DarkDiff, un sistem AI care ar putea revoluționa pozele făcute noaptea cu iPhone-ul</b>Apple, împreună cu cercetători de la Universitatea Purdue, a prezentat o tehnologie experimentală numită DarkDiff, care folosește modele generative de tip diffusion integrate direct în procesorul de semnal de imagine (ISP) al camerei. Ideea din spatele

Apple a lucrat împreună cu o echipă de cercetători de la Universitatea Purdue la o tehnologie nouă numită DarkDiff. Ce face? Pe scurt, ajută camera unui telefon să „vadă” mai bine pe întuneric, adică să scoată detalii clare și reale din poze făcute în condiții foarte slabe de lumină. Pozele de noapte, care până acum ieșeau mișcate, neclare sau prea întunecate, ar putea deveni în sfârșit utilizabile.

Ce e special la DarkDiff e că folosește un tip de inteligență artificială numit model de tip diffusion, inspirat dintr-un proiect open-source cunoscut: Stable Diffusion. Acest AI învață cum ar trebui să arate o imagine normală și apoi „umple” golurile dintr-o poză întunecată, pe baza informațiilor pe care le are. Funcționează împreună cu sistemul din cameră care procesează imaginea (așa-numitul ISP), dar adaugă o etapă suplimentară unde reconstruiește detalii care altfel s-ar pierde.

Cei care au testat această tehnologie au făcut experimente extreme, cum ar fi poze făcute noaptea cu o expunere de doar 0,033 secunde - adică un „clic” aproape instant. Apoi au comparat rezultatul cu poze făcute cu expunere de 300 de ori mai lungă (folosind un trepied). Rezultatul? DarkDiff a reușit să redea detalii clare în clădiri și vegetație, acolo unde metodele clasice scoteau doar o imagine netedă și fără textură.

Totuși, tehnologia nu e perfectă. Procesarea AI e foarte lentă și consumatoare de baterie. Dacă s-ar rula direct pe telefon, ți-ar epuiza rapid autonomia. De aceea, cercetătorii spun că pentru ca sistemul să fie utilizabil în viața reală, e nevoie ca procesarea să fie făcută în cloud (adică online, pe servere), ceea ce vine cu alte provocări - cum ar fi viteza conexiunii sau confidențialitatea imaginilor.

Apple testează DarkDiff, un sistem AI care ar putea revoluționa pozele făcute noaptea cu iPhone-ul

Un alt minus: sistemul se descurcă greu cu textul din poze, mai ales dacă e în altă limbă decât engleza. Deci nu va fi foarte util dacă vrei să pozezi un meniu sau un afiș pe întuneric.

Important de spus e că Apple nu a anunțat că această tehnologie va fi introdusă în următorul iPhone. Deocamdată e doar o cercetare, dar una care arată direcția în care merge compania: fotografia digitală ghidată tot mai mult de AI. E o tendință normală, având în vedere că senzorii foto din telefoane sunt mici și limitați, așa că softul trebuie să compenseze tot mai mult.

Pentru cei curioși să înțeleagă mai bine cum funcționează aceste modele AI de tip diffusion, pot găsi explicații utile aici:

Acest site folosește cookies. Prin navigarea pe acest site, vă exprimați acordul asupra folosirii cookie-urilor. Citește mai mult×