Apple-ը տեղում չի դոփում հաշվողական լուսանկարչության (computational photography) ոլորտում. ընկերությունն ակտիվորեն մշակում է DarkDiff նեյրոցանցը, որը պետք է արմատապես բարելավի գիշերային կադրերի որակը: Պատրաստի լուսանկարի ավանդական հետմշակման փոխարեն՝ ալգորիթմն աշխատում է աղմուկի (noise) հետ անմիջապես պատկերի որսման ընթացքում, ինչը խոստանում է պահպանել մանրամասները՝ առանց որակի կորստի:

Ինչպե՞ս է աշխատում DarkDiff-ը

Նոր ԱԲ-ն կառուցված է բաց կոդով Stable Diffusion V2-1 մոդելի հիման վրա: Այն չի սպասում պատրաստի լուսանկարին, այլ ճնշում է աղմուկը սենսորից եկող «հում» (raw) ազդանշանի վրա, քանի դեռ կադրը ձևավորվում է: Սա հնարավորություն է տալիս պահպանել տեքստուրաները, գույներն ու մանր դետալները, որոնք սովորաբար կորչում են ագրեսիվ աղմկազրկման (denoising) ժամանակ:

Ներկա փուլում DarkDiff-ը փորձարարական է. այն չափազանց շատ ռեսուրսներ է պահանջում բջջային սարքերի համար և երբեմն «շփոթում է» ցուցանակների ոչ լատինատառ նշանները՝ ավելացնելով արտեֆակտներ: Սակայն պոտենցիալը հսկայական է՝ հատկապես ապարատային բարելավումների հետ համադրության դեպքում:

Զուգահեռաբար. սեփական սենսոր՝ անալոգային աղմկազրկմամբ

Apple-ը չի սահմանափակվում միայն ծրագրային ապահովմամբ. ընկերությունը գաղտնի ռեժիմով փորձարկում է սեփական CMOS սենսորը՝ ներկառուցված անալոգային աղմկազրկման համակարգով: Այս ապարատային լուծումը պետք է էլ ավելի նվազեցնի աղմուկը ցածր ազդանշանի մակարդակում՝ նախքան տվյալների թվային մշակմանն անցնելը:

Ե՞րբ սպասել iPhone-ում

Առայժմ ամեն ինչ վաղ փուլում է. DarkDiff-ը օպտիմալացման կարիք ունի, իսկ սենսորը՝ վերջնական լրամշակման: iPhone-ների լայն զանգվածներում այս տեխնոլոգիայի ներդրումը կարող է տևել մի քանի տարի՝ ամենայն հավանականությամբ ոչ շուտ, քան 2028–2029 թվականներին: Բայց ուղղությունը պարզ է. Apple-ը ցանկանում է գիշերային նկարահանումը դարձնել տեսախցիկի հերթական «հարվածային ֆունկցիան» (killer feature):

Կարճ ասած

Apple-ը Stable Diffusion-ի հիման վրա մշակում է DarkDiff ԱԲ-ն՝ աղմուկն անմիջապես նկարահանման ընթացքում ճնշելու համար. սա ավելի լավ կպահպանի գիշերային լուսանկարների դետալները, քան ավանդական մեթոդները: Զուգահեռաբար փորձարկվում է սեփական սենսոր՝ անալոգային աղմկազրկմամբ: Տեխնոլոգիաները փորձարարական են և ռեսուրսատար, բայց հեռանկարում բեկումնային են բջջային լուսանկարչության համար: Սպասում ենք iPhone-ներում մի քանի տարի անց: