Ինչպե՞ս է աշխատում արհեստական ​​բանականության բարձրացումը։ [Տեսանյութ և թեստ]

Կարճ պատասխան. Արհեստական ​​​​բանականության բարձրացումը գործում է՝ մոդելը մարզելով ցածր և բարձր թույլտվությամբ զույգ պատկերների վրա, այնուհետև դրանք օգտագործելով՝ աճի ընթացքում հավաստի լրացուցիչ պիքսելներ կանխատեսելու համար: Եթե ​​մոդելը մարզման ընթացքում տեսել է նմանատիպ հյուսվածքներ կամ դեմքեր, այն կարող է համոզիչ մանրամասներ ավելացնել. եթե ոչ, այն կարող է «հալյուցինացիաներ» առաջացնել տեսանյութում, ինչպիսիք են հալոները, մոմապատ մաշկը կամ թարթումը: 

Հիմնական եզրակացություններ՝

Կանխատեսում. Մոդելը ստեղծում է հավանական մանրամասներ, այլ ոչ թե իրականության երաշխավորված վերակառուցում։

Մոդելի ընտրություն. CNN-ները հակված են ավելի կայուն լինելու. GAN-ները կարող են ավելի սուր տեսք ունենալ, բայց ռիսկի են դիմում ստեղծել նոր գործառույթներ։

Արտեֆակտների ստուգում. ուշադրություն դարձրեք լուսապսակներին, կրկնվող հյուսվածքներին, «գրեթե տառերին» և պլաստիկ դեմքերին։

Տեսանյութի կայունություն. Օգտագործեք ժամանակային մեթոդներ, հակառակ դեպքում կտեսնեք կադրից կադր փայլատակում և տեղաշարժ։

Բարձր ռիսկային օգտագործում. Եթե ճշգրտությունը կարևոր է, բացահայտեք մշակումը և արդյունքները համարեք օրինակելի։

Դուք հավանաբար տեսել եք. փոքրիկ, ճռճռան պատկերը վերածվում է բավականաչափ ճռճռանի՝ առանց ցնցվելու տպելու, հոսքային դիտելու կամ ներկայացման մեջ դնելու համար։ Դա խաբեության է նման։ Եվ՝ լավագույն իմաստով՝ այդպես էլ կա 😅

Այսպիսով, արհեստական ​​բանականության միջոցով սքեյլինգի աշխատանքի սկզբունքը հանգում է ավելի կոնկրետ բանի, քան «համակարգիչը բարելավում է մանրամասները» (ձեռքի ալիքավոր ձևաչափով) և ավելի մոտ է «մոդելը կանխատեսում է հավանական բարձր թույլտվության կառուցվածք՝ հիմնվելով բազմաթիվ օրինակներից ստացված օրինաչափությունների վրա» (Deep Learning for Image Super-resolution: A Survey): Այդ կանխատեսման քայլը ամբողջ խաղն է, և այդ պատճառով էլ արհեստական ​​բանականության միջոցով սքեյլինգը կարող է ապշեցուցիչ տեսք ունենալ… կամ մի փոքր պլաստիկ… կամ ինչպես ձեր կատվի մոտ լրացուցիչ բեղեր են աճեցվել:

Հոդվածներ, որոնք կարող են ձեզ դուր գալ կարդալ սրանից հետո

🔗 Ինչպես է աշխատում արհեստական ​​բանականությունը
Սովորեք արհեստական ​​բանականության մեջ մոդելների, տվյալների և եզրակացությունների հիմունքները։.

🔗 Ինչպես է արհեստական ​​բանականությունը սովորում
Տեսեք, թե ինչպես են մարզման տվյալները և հետադարձ կապը ժամանակի ընթացքում բարելավում մոդելի աշխատանքը։.

🔗 Ինչպես է արհեստական ​​բանականությունը հայտնաբերում անոմալիաները
Հասկացեք օրինաչափությունների ելակետային գծերը և թե ինչպես է արհեստական ​​բանականությունը արագորեն հայտնաբերում անսովոր վարքագիծը։.

🔗 Ինչպես է արհեստական ​​բանականությունը կանխատեսում միտումները
Ուսումնասիրեք կանխատեսման մեթոդները, որոնք հայտնաբերում են ազդանշանները և կանխատեսում ապագա պահանջարկը։.

Ինչպես է աշխատում արհեստական ​​բանականության արդիականացումը. հիմնական գաղափարը՝ առօրյա բառերով 🧩

Մեծացում նշանակում է թույլտվության բարձրացում. ավելի շատ պիքսելներ, ավելի մեծ պատկեր: Ավանդական մեծացումը (ինչպես երկխորանարդայինը) հիմնականում ձգում է պիքսելները և հարթեցնում անցումները (երկխորանարդային ինտերպոլյացիա): Այն լավ է, բայց այն չի կարող նոր մանրամասներ հորինել՝ այն պարզապես ինտերպոլյացիա է անում:

Արհեստական ​​բանականության բարձրացումը փորձում է ավելի համարձակ մի բան (հետազոտական ​​աշխարհում հայտնի է որպես «գերլուծաչափ») (Խորը ուսուցում պատկերի գերլուծաչափի համար. Հարցում):

• Այն նայում է ցածր թույլտվությամբ մուտքին

• Ճանաչում է նախշերը (եզրեր, հյուսվածքներ, դեմքի գծեր, տեքստի գծեր, գործվածքի հյուսվածք և այլն):

• Կանխատեսում է, թե ինչպիսին պետք է լինի ավելի բարձր թույլտվությամբ տարբերակը

• Ստեղծում է լրացուցիչ պիքսելային տվյալներ, որոնք համապատասխանում են այդ նախշերին

Ոչ թե «իրականությունը կատարելապես վերականգնել», այլ ավելի շուտ «շատ հավաստի ենթադրություն անել» (Image Super-Resolution Using Deep Convolutional Networks (SRCNN)): Եթե դա մի փոքր կասկածելի է հնչում, դուք չեք սխալվում, բայց նաև դա է պատճառը, որ այն այդքան լավ է աշխատում 😄

Եվ այո, սա նշանակում է, որ արհեստական ​​բանականության միջոցով արդիականացումը, ըստ էության, վերահսկվող հալյուցինացիա է… բայց արդյունավետ, պիքսելները հարգող ձևով։.

Ի՞նչն է արհեստական ​​բանականության միջոցով արդիականացման տարբերակը դարձնում լավը։ ✅🛠️

Եթե ​​դուք գնահատում եք արհեստական ​​բանականության բարձրացման գործիքը (կամ կարգավորումների նախադրված տարբերակը), ահա թե ինչն է ամենակարևորը

• Մանրամասների վերականգնում առանց չափից շատ եփելու։
  Լավ չափաբաժնի բարձրացումը հաղորդում է թարմություն և կառուցվածք, այլ ոչ թե ճռճռան աղմուկ կամ կեղծ ծակոտիներ։

• Եզրերի կարգապահություն։
  Մաքուր գծերը մնում են մաքուր։ Վատ մոդելները եզրերը տատանում կամ լուսապսակներ են առաջացնում։

• Հյուսվածքային ռեալիզմ։
  Մազերը չպետք է դառնան վրձնի հարված։ Աղյուսը չպետք է դառնա կրկնվող նախշի դրոշմ։

• Շर्यानारान և սեղմման կառավարում։
  Շատ առօրյա պատկերներ JPEG ֆորմատով մահացու են։ Լավ upscaler-ը չի ուժեղացնում այդ վնասը (Real-ESRGAN):

• Դեմքի և տեքստի ընկալում։
  Դեմքերը և տեքստը սխալները նկատելու ամենահեշտ վայրերն են։ Լավ մոդելները դրանց վերաբերվում են նրբանկատորեն (կամ ունեն մասնագիտացված ռեժիմներ)։

• Համապատասխանություն կադրերի միջև (տեսանյութի համար):
  Եթե մանրամասները թարթում են կադրից կադր, ձեր աչքերը կճչան: Տեսանյութի մասշտաբի բարձրացումը կամ կենդանի է, կամ մեռնում է ժամանակային կայունության շնորհիվ (BasicVSR (CVPR 2021)):

• Իմաստալից կառավարման տարրեր։
  Ձեզ անհրաժեշտ են սահիկներ, որոնք համապատասխանում են իրական արդյունքներին. աղմուկի նվազեցում, մշուշոտության հեռացում, արտեֆակտների հեռացում, հատիկի պահպանում, սրացում… գործնական բաները։

Հանգիստ կանոն, որը գործում է. «լավագույն» բարձրացումը հաճախ այն է, որը դուք հազիվ եք նկատում: Պարզապես թվում է, թե սկզբում ավելի լավ տեսախցիկ եք ունեցել 📷✨

Համեմատական ​​աղյուսակ. արհեստական ​​ինտելեկտի միջոցով բարելավման հայտնի տարբերակներ (և ինչի համար են դրանք օգտակար) 📊🙂

Ստորև ներկայացված է գործնական համեմատություն։ Գները միտումնավոր անորոշ են, քանի որ գործիքները տարբերվում են՝ կախված լիցենզիայից, փաթեթներից, հաշվողական ծախսերից և այդ բոլոր զվարճալի բաներից։.

Ձևաչափման առանձնահատկության խոստովանություն. «Paid-ish»-ը շատ աշխատանք է կատարում այդ աղյուսակում։ Բայց դուք հասկացաք գաղափարը 😅

Մեծ գաղտնիքը. մոդելները սովորում են ցածր թույլտվությունից բարձր թույլտվության անցում կատարել 🧠➡️🖼️

Արհեստական ​​​​ինտելեկտի միջոցով իրականացվող արդիականացման մեծ մասի հիմքում ընկած է վերահսկվող ուսուցման համակարգը (պատկերի գերլուծաչափ՝ խորը կոնվոլյուցիոն ցանցերի միջոցով (SRCNN)):

1. Սկսեք բարձր թույլտվությամբ պատկերներից («ճշմարտությունը»)

2. Նվազեցրեք դրանք ցածր թույլտվությամբ տարբերակների («մուտքային»)

3. Մարզեք մոդել՝ ցածր թույլտվությամբ լուսանկարը բարձր թույլտվությամբ վերականգնելու համար

Ժամանակի ընթացքում մոդելը սովորում է հետևյալ համակցությունները

• «Աչքի շուրջ այս տեսակի մշուշը սովորաբար բնորոշ է թարթիչներին»

• «Այս պիքսելային կլաստերը հաճախ ցույց է տալիս սերիֆ տեքստ»

• «Այս եզրային գրադիենտը տանիքի գծի տեսք ունի, այլ ոչ թե պատահական աղմուկի»

Դա կոնկրետ պատկերների անգիր սովորելը չէ (պարզ իմաստով), այլ վիճակագրական կառուցվածքի ուսուցում է (Deep Learning for Image Super-resolution: A Survey): Պատկերացրեք դա որպես հյուսվածքների և եզրերի քերականություն սովորելը: Ոչ թե պոեզիայի քերականություն, այլ ավելի շուտ… IKEA-ի ձեռնարկի քերականություն 🪑📦 (անհարմար փոխաբերություն, բայց բավականին մոտ):

Հիմնական սկզբունքները. ինչ է կատարվում եզրակացության ժամանակ (երբ դուք բարձրացնում եք մասշտաբը) ⚙️✨

Երբ դուք պատկեր եք ներմուծում արհեստական ​​ինտելեկտի բարելավման սարքի մեջ, սովորաբար կա հետևյալ գործընթացը՝

• Նախնական մշակում

  • Գունային տարածության փոխակերպում (երբեմն)

  • Նորմալացնել պիքսելային արժեքները

  • Եթե ​​պատկերը մեծ է, բաժանեք կտորների (VRAM իրականության ստուգում 😭) (Real-ESRGAN պահոց (խճանկարների տարբերակներ))

• Հատկանիշների արդյունահանում

  • Վաղ շերտերը հայտնաբերում են եզրեր, անկյուններ, թեքություններ

  • Ավելի խորը շերտերը հայտնաբերում են նախշեր՝ հյուսվածքներ, ձևեր, դեմքի բաղադրիչներ

• Վերակառուցում

  • Մոդելը ստեղծում է ավելի բարձր թույլտվությամբ հատկանիշների քարտեզ

  • Այնուհետև դա վերածում է իրական պիքսելային արդյունքի

• Հետմշակում

  • Լրացուցիչ սրում

  • Ըստ ցանկության՝ աղմուկի նվազեցում

  • Արտեֆակտների (զանգերի, հալոների, խցանման) լրացուցիչ ճնշում

Մեկ նուրբ մանրուք. շատ գործիքներ բարձրացնում են սալիկների չափսերը, ապա խառնում են կարերը: Հիանալի գործիքները թաքցնում են սալիկների սահմանները: Մեխանիկական գործիքները թողնում են թույլ ցանցի հետքեր, եթե կկոցեք աչքերը: Եվ այո, դուք կկոցեք աչքերը, քանի որ մարդիկ սիրում են զննել մանր թերությունները 300% մեծացմամբ, ինչպես փոքրիկ գրեմլինները 🧌

Արհեստական ​​բանականության բարձրացման համար օգտագործվող հիմնական մոդելների ընտանիքները (և թե ինչու են դրանք տարբերվում միմյանցից) 🤖📚

1) CNN-ի վրա հիմնված գերլուծաչափ (դասական աշխատանքային ձի)

Կոնվոլյուցիոն նեյրոնային ցանցերը հիանալի են տեղային օրինաչափությունների՝ եզրերի, հյուսվածքների, փոքր կառուցվածքների համար (Պատկերի գերլուծաչափ՝ խորը կոնվոլյուցիոն ցանցերի միջոցով (SRCNN)):

• Առավելություններ՝ արագ, կայուն, ավելի քիչ անակնկալներ

• Թերություններ՝ կարող է մի փոքր «մշակված» թվալ, եթե շատ սեղմվի

2) GAN-ի վրա հիմնված բարձրացում (ESRGAN ոճով) 🎭

GAN-ները (Գեներատիվ հակառակորդական ցանցեր) մարզում են գեներատորին ստեղծելու բարձր թույլտվության պատկերներ, որոնք տարբերակողը չի կարող տարբերակել իրականից (Գեներատիվ հակառակորդական ցանցեր):

• Առավելություններ՝ վառ մանրամասներ, տպավորիչ հյուսվածք

• Թերություններ՝ կարող է հորինել մանրամասներ, որոնք գոյություն չունեն՝ երբեմն սխալ, երբեմն՝ արտասովոր (SRGAN, ESRGAN):

GAN-ը կարող է ձեզ տալ ապշեցուցիչ սրություն։ Այն նաև կարող է ձեր դիմանկարին լրացուցիչ հոնք հաղորդել։ Այսպիսով… ընտրեք ձեր մարտերը 😬

3) Դիֆուզիայի վրա հիմնված արդիականացում (ստեղծագործական վայրի քարտ) 🌫️➡️🖼️

Դիֆուզիոն մոդելները քայլ առ քայլ ջնջում են աղմուկը և կարող են ուղղորդվել բարձր թույլտվությամբ մանրամասներ ստանալու համար (SR3):

• Առավելություններ՝ կարող է աներևակայելիորեն լավ լինել հավանական մանրամասների մեջ, հատկապես ստեղծագործական աշխատանքի համար

• Թերություններ՝ կարող է շեղվել սկզբնական ինքնությունից/կառուցվածքից, եթե կարգավորումները ագրեսիվ են (SR3)

Ահա թե որտեղ է «բարձրացումը» սկսում միախառնվել «վերաիմաստավորմանը»։ Երբեմն դա հենց այն է, ինչ դուք ուզում եք։ Երբեմն՝ ոչ։.

4) Տեսանյութի արդիականացում ժամանակային համապատասխանությամբ 🎞️

Տեսանյութի մասշտաբի բարձրացումը հաճախ ավելացնում է շարժման գիտակցող տրամաբանություն։

• Օգտագործում է հարևան կադրերը՝ մանրամասները կայունացնելու համար (BasicVSR (CVPR 2021))

• Փորձում է խուսափել թարթող և սողացող արտեֆակտներից

• Հաճախ համատեղում է գերլուծաչափը աղմուկի նվազեցման և ապամիջտեղադրման հետ (Topaz Video)

Եթե ​​պատկերի մասշտաբի բարձրացումը նման է մեկ նկարի վերականգնմանը, ապա տեսանյութի մասշտաբի բարձրացումը նման է գրքույկի վերականգնմանը՝ առանց կերպարի քթի ձևը փոխելու ստիպելու ամեն էջում։ Որը… ավելի դժվար է, քան թվում է։.

Ինչու է արհեստական ​​բանականության միջոցով բարելավումը երբեմն կեղծ թվում (և ինչպես այն նկատել) 👀🚩

Արհեստական ​​բանականության միջոցով արդիականացումը ձախողվում է ճանաչելի ձևերով։ Երբ սովորեք օրինաչափությունները, դրանք կտեսնեք ամենուր, օրինակ՝ նոր մեքենա գնելիս և հանկարծակի այդ մոդելը նկատելիս ամեն փողոցում 😵💫

Ընդհանուրը պատմում է

• Դեմքի մաշկի մոմապատում (չափազանց շատ աղմուկի հեռացում + հարթեցում)

• չափազանց սրված հալոներ (դասական «գերազանցման» տարածք) (երկու խորանարդաձև ինտերպոլյացիա)

• Կրկնվող հյուսվածքներ (աղյուսե պատերը վերածվում են պատճենահանված նախշերի)

• Խրթխրթան միկրոկոնտրաստ , որը գոռում է «ալգորիթմ»

• Տեքստի աղավաղում , որտեղ տառերը գրեթե տառեր են դառնում (ամենավատ տեսակը)

• Մանրամասների շեղում , որտեղ փոքր առանձնահատկությունները աննշանորեն փոխվում են, հատկապես դիֆուզիոն աշխատանքային հոսքերում (SR3):

Խճճված մասը. երբեմն այս արտեֆակտները առաջին հայացքից «ավելի լավ» են թվում: Ձեր ուղեղը սիրում է սրությունը: Բայց մի պահ անց այն… անճաշակ է թվում:.

Լավ մարտավարություն է մեծացնել պատկերը և ստուգել, ​​թե արդյոք այն բնական տեսք ունի նորմալ դիտման հեռավորությունից։ Եթե այն լավ տեսք ունի միայն 400% մեծացման դեպքում, դա հաղթանակ չէ, դա հոբբի է 😅

Ինչպես է աշխատում արհեստական ​​բանականության բարձրացումը. մարզման կողմը՝ առանց մաթեմատիկական գլխացավանքի 📉🙂

Գերլուծաչափային մոդելների վարժեցումը սովորաբար ներառում է

• Զույգացված տվյալների հավաքածուներ (ցածր թույլտվությամբ մուտքային տվյալներ, բարձր թույլտվությամբ թիրախային տվյալներ) (Պատկերի գեր-լուծաչափ՝ խորը կոնվոլյուցիոն ցանցերի միջոցով (SRCNN))

• Կորստի ֆունկցիաներ , որոնք պատժում են սխալ վերակառուցումները (SRGAN)

Կորուստների բնորոշ տեսակները

• Պիքսելների կորուստը (L1/L2)
  խրախուսում է ճշգրտությունը։ Կարող է մի փոքր թույլ արդյունքներ տալ։

• Զգացողության կորուստը
  համեմատում է ավելի խորը առանձնահատկությունները (օրինակ՝ «սա նման է՞ » ), այլ ոչ թե ճշգրիտ պիքսելները (Զգացողության կորուստներ (Ջոնսոն և այլք, 2016)):

• Հակառակորդական կորուստ (ՀԱԿ)
  Խրախուսում է ռեալիզմը, երբեմն՝ բառացի ճշգրտության գնով (SRGAN, Գեներատիվ Հակառակորդական ցանցեր):

Կա անընդհատ պայքար

• Դարձրեք այն հավատարիմ բնօրինակին
  vs.

• Դարձրեք այն տեսողականորեն հաճելի

Այդ սպեկտրի տարբեր մասերում տարբեր գործիքներ են հանդիպում։ Եվ դուք կարող եք նախընտրել դրանցից մեկը՝ կախված նրանից, թե վերականգնում եք ընտանեկան լուսանկարներ, թե պատրաստում եք պաստառ, որտեղ «գեղեցիկ տեսքը» ավելի կարևոր է, քան դատաբժշկական ճշգրտությունը։.

Գործնական աշխատանքային հոսքեր՝ լուսանկարներ, հին սկանավորված լուսանկարներ, անիմե և տեսանյութեր 📸🧾🎥

Լուսանկարներ (դիմանկարներ, բնապատկերներ, արտադրանքի լուսանկարներ)

Լավագույն պրակտիկան սովորաբար հետևյալն է

• Սկզբում թեթևակի աղմկազերծեք (անհրաժեշտության դեպքում)

• Բարձրակարգ՝ պահպանողական կարգավորումներով

• Ավելացրեք հատիկավոր զանգված, եթե ամեն ինչ չափազանց հարթ է թվում (այո, իսկապես)

Հացահատիկը աղի նման է։ Չափից շատը փչացնում է ընթրիքը, բայց ոչ մի բան չի կարող մի փոքր անճաշակ լինել 🍟

Հին սկանավորումներ և խիստ սեղմված պատկերներ

Սրանք ավելի դժվար են, քանի որ մոդելը կարող է սեղմման բլոկները դիտարկել որպես «տեքստուրա»։
Փորձեք՝

• Արտեֆակտների հեռացում կամ արգելափակման վերացում

• Ապա բարձրակարգ

• Ապա լույսի սրացում (ոչ շատ… գիտեմ, բոլորն են դա ասում, բայց միևնույն է)

Անիմե և գծանկար

Գծային արվեստը առավելություններ ունի

• Մոդելներ, որոնք պահպանում են մաքուր եզրերը

• Նվազեցված հյուսվածքային հալյուցինացիա։
  Անիմեի մասշտաբի բարձրացումը հաճախ հիանալի տեսք ունի, քանի որ ձևերն ավելի պարզ և հաստատուն են։ (Բախտավոր է։)

Տեսանյութ

Տեսանյութում ավելացված են լրացուցիչ քայլեր

• Աղմուկից ազատում

• Դեինտերլեյս (որոշակի աղբյուրների համար)

• Բարձրակարգ

• Ժամանակային հարթեցում կամ կայունացում (BasicVSR (CVPR 2021))

• Հացահատիկի լրացուցիչ վերականգնում՝ համախմբվածության համար

Եթե ​​բաց թողնեք ժամանակային համապատասխանությունը, կտեսնեք այդ փայլուն մանրուքի թարթումը։ Երբ նկատեք այն, այլևս չեք կարող անտեսանելի լինել։ Ինչպես ճռռացող աթոռը լուռ սենյակում 😖

Կարգավորումներ ընտրել առանց շատ կռահելու (փոքրիկ խաբեբա թերթիկ) 🎛️😵💫

Ահա լավ մեկնարկային մտածելակերպ

• Եթե ​​դեմքերը պլաստիկ տեսք ունեն,
  նվազեցրեք աղմուկի նվազեցումը, սրությունը, փորձեք դեմքը պահպանող մոդել կամ ռեժիմ։

• Եթե ​​հյուսվածքները չափազանց ինտենսիվ են թվում,
  իջեցրեք «մանրամասների բարելավման» կամ «մանրամասների վերականգնման» սահիկները, դրանից հետո ավելացրեք նուրբ հատիկավորություն։

• Եթե ​​եզրերը փայլում են,
  նվազեցրեք սրությունը, ստուգեք լուսապսակի ճնշման տարբերակները։

• Եթե ​​պատկերը չափազանց «արհեստական» է թվում,
  ապա ավելի պահպանողական եղեք։ Երբեմն լավագույն քայլը պարզապես… պակասն է։

Նաև՝ մի՛ մեծացրեք 8x-ը միայն այն պատճառով, որ կարող եք։ Մաքուր 2x-ը կամ 4x-ը հաճախ լավագույն տարբերակն է։ Դրանից զատ, դուք խնդրում եք մոդելին գրել երկրպագուական պատմություններ ձեր պիքսելների մասին 📖😂

Էթիկա, իսկություն և «ճշմարտության» անհարմար հարցը 🧭😬

Արհեստական ​​բանականության միջոցով մասշտաբի բարձրացումը խամրեցնում է սահմանը

• Վերականգնումը նշանակում է վերականգնել այն, ինչ կար

• Բարելավումը ենթադրում է ավելացնել այն, ինչ չկար

Անձնական լուսանկարների դեպքում սովորաբար դա նորմալ է (և հաճելի): Լրագրության, իրավական ապացույցների, բժշկական պատկերագրության կամ ցանկացած այլ բանի դեպքում, որտեղ հավատարմությունը կարևոր է… դուք պետք է զգույշ լինեք (OSAC/NIST: Դատաբժշկական թվային պատկերների կառավարման ստանդարտ ուղեցույց, SWGDE դատաբժշկական պատկերների վերլուծության ուղեցույցներ):

Պարզ կանոն

• Եթե ​​խաղադրույքները բարձր են, արհեստական ​​բանականության բարձրացումը դիտարկեք որպես օրինակ, այլ ոչ թե վերջնական։

Բացի այդ, բացահայտումը կարևոր է մասնագիտական ​​համատեքստերում։ Ոչ թե որովհետև արհեստական ​​բանականությունը չարիք է, այլ որովհետև լսարանը արժանի է իմանալ, թե արդյոք մանրամասները վերականգնվել են, թե արձանագրվել։ Դա պարզապես… հարգալից է։.

Եզրափակիչ նշումներ և կարճ ամփոփում 🧡✅

Այսպիսով, արհեստական ​​բանականության միջոցով վերափոխումը հետևյալն է. մոդելները սովորում են, թե ինչպես են բարձր թույլտվության մանրամասները հակված կապված լինել ցածր թույլտվության օրինաչափությունների հետ, այնուհետև կանխատեսում են հավաստի լրացուցիչ պիքսելներ վերափոխման ընթացքում (Խորը ուսուցում պատկերի գերլուծաչափի համար. Հարցում): Կախված մոդելների ընտանիքից (CNN, GAN, դիֆուզիոն, տեսա-ժամանակավոր), այդ կանխատեսումը կարող է լինել պահպանողական և ճշգրիտ… կամ համարձակ և երբեմն անհամապատասխան 😅

Հակիրճ ամփոփում

• Ավանդական բարձրացմանը մեծացնում է պիքսելները (երկու խորանարդ ինտերպոլյացիա)

• Արհեստական ​​բանականության բարձրացումը կանխատեսում է բացակայող մանրամասները՝ օգտագործելով սովորած օրինաչափությունները (պատկերի գերլուծաչափ՝ խորը կոնվոլյուցիոն ցանցերի միջոցով (SRCNN)):

• Հիանալի արդյունքներ են ստացվում ճիշտ մոդելից + զսպվածությունից

• Դիտեք հալոները, մոմե դեմքերը, կրկնվող հյուսվածքները և թարթումը տեսանյութում (BasicVSR (CVPR 2021)):

• Բարձրացումը հաճախ «հավանական վերակառուցում» է, այլ ոչ թե կատարյալ ճշմարտություն (SRGAN, ESRGAN):

Եթե ​​ուզում ես, ասա ինձ, թե ինչն ես թարմացնում (դեմքեր, հին լուսանկարներ, տեսանյութեր, անիմե, տեքստի սկանավորում), և ես կառաջարկեմ կարգավորումների ռազմավարություն, որը հակված է խուսափելու «արհեստական ​​​​մտքի տեսքի» տարածված թակարդներից 🎯🙂

Իրական աշխարհի օրինակ՝ հին շուկայի ապրանքների լուսանկարների արդիականացում 📸

Սցենար

Փոքրիկ օգտագործված տեսախցիկների խանութը հին կայքից արտահանել է 40 ապրանքի լուսանկար՝ 800 պիքսել լայնությամբ։ Սեփականատերը ցանկանում է վերօգտագործել դրանք նոր էլեկտրոնային առևտրի էջում, որտեղ խորհուրդ է տրվում օգտագործել 1600 պիքսել լայնությամբ պատկեր։.

Խնդիրն այն է, որ սովորական չափսերի փոփոխությունը տեսախցիկները դարձնում է ավելի փափուկ, մինչդեռ ագրեսիվ արհեստական ​​բանականության միջոցով մեծացումը կարող է ռետինե բռնակները, սերիական համարները և օբյեկտիվի նշումները կասկածելիորեն կեղծ թվացնել։ Սա կարևոր է, քանի որ գնորդները գնումներ կատարելուց առաջ հիմնվում են այդ մանրամասների վրա։.

Նպատակը բացակայող տեղեկատվությունը կատարելապես «վերականգնելը» չէ։ Այն ավելի մաքուր ցուցակների պատկերներ ստեղծելն է՝ միաժամանակ բնօրինակ ֆայլերը հասանելի պահելով, քանի որ արհեստական ​​բանականության բարձրացումը կանխատեսում է հավանական մանրամասները, այլ ոչ թե երաշխավորված ճշմարտությունը։.

Ինչ է անհրաժեշտ աշխատանքային հոսքի համար

Բնօրինակ ապրանքի լուսանկարներ, իդեալականորեն՝ ամենաքիչ սեղմված տարբերակները

Նպատակային արդյունքի չափ, օրինակ՝ 2× բարձրացված մասշտաբ՝ 800px-ից մինչև 1600px լայնությամբ

Գործիք կամ մոդել՝ աղմուկը մաքրելու, սրելու և արտեֆակտները հեռացնելու առանձին կառավարման տարրերով։

Տեքստի, եզրերի, լոգոների, պտուտակների, կոճակների, կաշվի մանրաթելի և արտացոլանքների պարզ վերանայման ստուգաթերթիկ

Պանակ բնօրինակների համար և առանձին պանակ խմբագրված արտահանման համար, այնպես որ ոչինչ չի վերագրվում

Օրինակային հրահանգ

Արհեստական ​​​​ինտելեկտի բարձրացման սարքը փորձարկելիս օգտագործեք այս տեսակի հրահանգը

Այս ապրանքի լուսանկարը 2 անգամ մեծացրեք էլեկտրոնային առևտրի ցուցակի համար: Պահեք առարկայի ձևը, լոգոյի տեղադրումը, օբյեկտիվի նշումները, կոճակների եզրերը և մակերեսի հյուսվածքը որքան հնարավոր է մոտ բնօրինակին: Օգտագործեք մեղմ սեղմման մաքրում, ցածր սրություն և խուսափեք լրացուցիչ տեքստի, քերծվածքների, պիտակների, սերիական համարների կամ դեկորատիվ մանրամասների հորինումից: Վերջնական պատկերը պետք է բնական տեսք ունենա ապրանքի էջի սովորական չափի դեպքում, այլ ոչ թե արհեստականորեն սուր՝ 400% մեծացման դեպքում:.

Ինչպես փորձարկել այն

Սկսեք հինգ խառը պատկերներից, նախքան ամբողջ խմբաքանակը մշակելը։

Մեկ մաքուր ապրանքի լուսանկար լավ լուսավորությամբ

Մեկ JPEG սեղմված պատկեր՝ խցանվածությամբ

Մեկ լուսանկար՝ մանր տպագիր տեքստով կամ օբյեկտիվի նշումներով

Մեկ մութ պատկեր՝ ստվերում աղմուկով

Մեկ պատկեր՝ արտացոլող մետաղով կամ ապակիով

Չափափոխելուց հետո համեմատեք յուրաքանչյուր արդյունքը բնօրինակի հետ՝ 100% և 200% ճշգրտությամբ։ Ստուգեք, թե արդյոք ապրանքանիշերի անվանումները, թվատախտակները, պտուտակները, միացքները և հյուսվածքային նախշերը դեռևս համընկնում են։ Եթե մոդելը ստեղծում է «գրեթե տառեր» կամ կեղծ մակերեսային նշաններ, իջեցրեք սրման կամ մանրամասների վերականգնման կարգավորումը։.

Արդյունք

Նկարազարդ արդյունք՝ հիմնված այս աշխատանքային հոսքի օգտագործումից առաջ և հետո հինգ պատկերից բաղկացած թեստի ժամանակի հաշվարկման վրա։.

Ձեռքով մաքրումը և չափափոխումը տևեց մոտ 9 րոպե մեկ պատկերի համար, կամ 45 րոպե՝ հինգ պատկերի համար։.

Արհեստական ​​բանականության աջակցությամբ աշխատանքային հոսքը տևեց մոտ 3 րոպե մեկ պատկերի համար, կամ 15 րոպե՝ հինգ պատկերի համար։.

Դա մոտավորապես 30 րոպե է խնայում հինգ պատկերի վրա, կամ մոտ 4 ժամ՝ 40 պատկերի փաթեթի համար։.

Որակի ստուգման արդյունք՝ 5 պատկերներից 4-ը հաջողությամբ անցան առաջին ստուգումը։ Մեկ պատկեր չստացվեց, քանի որ մեծացնողը աղավաղեց փոքր օբյեկտիվի տեքստը, ուստի այն վերամշակվեց ավելի ցածր սրությամբ և առանց տեքստի բարելավման։.

Այստեղ արժեքավոր չափանիշը պարզապես «ավելի սուր տեսք ունենալը» չէ։ Այն հետևյալն է՝ քանի՞ պատկեր է անցնում կողք կողքի ակնարկ՝ առանց հորինված մանրամասների։

Ի՞նչը կարող է սխալ ընթանալ

Մոդելը կարող է փոշին, JPEG բլոկները կամ քերծվածքները վերածել «իրական» հյուսվածքի։.

Փոքրիկ տեքստը կարող է դառնալ կեղծ տեքստ, որը հավաստի կթվա մինչև մեծացնելը։.

Չափազանց շատ աղմուկից ազատումը կարող է ռետինը, կաշին կամ խոզանակած մետաղը մոմագույն տեսք տալ։.

Ուժեղ սրումը կարող է հալոներ առաջացնել արտադրանքի եզրերի շուրջ։.

Փաթեթային մշակումը կարող է թաքցնել սխալները, ուստի ամեն ինչ արտահանելուց առաջ վերանայեք նմուշը։.

Էլեկտրոնային առևտրի համար ամենաապահով կանոնը պարզ է. երբեք մի օգտագործեք արհեստական ​​բանականության միջոցով մասշտաբի բարձրացում՝ վնասը թաքցնելու, վիճակը փոխելու կամ ապրանքը ավելի նոր տեսք տալու համար, քան կա։.

Գործնական ուսուցողական նյութ

Արհեստական ​​բանականության միջոցով մասշտաբի բարձրացումն ամենաարդյունավետն է, երբ այն դիտարկվում է որպես վերահսկվող ավարտական ​​քայլ, այլ ոչ թե որպես կախարդական վերանորոգման կոճակ։ Օգտագործեք պահպանողական 2× կարգավորումներ, ստուգեք գնորդներին հետաքրքրող մանրամասները և պահպանեք բնօրինակ պատկերը, որպեսզի խմբագրված տարբերակը մնա հավաստի։.

Իրական աշխարհի օրինակ՝ հին մարզական տեսանյութի մասշտաբի բարձրացում՝ առանց այն փայլեցնելու

Սցենար

Մի փոքր ուսումնական ընկերություն ունի 7 րոպեանոց անվտանգության ցուցադրական տեսանյութ, որը նկարահանվել է 2014 թվականին 720p որակով: Պարունակությունը դեռևս արժեքավոր է, բայց կադրերը թույլ են թվում ընկերության նոր կայքում, հատկապես մեծ նոութբուքերի էկրաններին:.

Թիմը ցանկանում է արտահանել ավելի մաքուր 1080p տարբերակ՝ առանց վերստին նկարահանելու։ Ռիսկն այն է, որ ագրեսիվ արհեստական ​​բանականության միջոցով մասշտաբի բարձրացումը կարող է դեմքերը մոմագույն տեսք տալ, ցուցանակների վրա տեքստը վերածել «գրեթե բառերի» կամ կադրից կադր թարթող հյուսվածք ստեղծել։.

Նպատակը տեսանյութը նոր տեսք տալը չէ։ Այն այն ավելի պարզ, կայուն և պակաս սեղմված դարձնելն է՝ միաժամանակ դասախոսի դեմքը, նախազգուշացնող պիտակները, ձեռքերի շարժումները և սարքավորումների մանրամասները պահպանելով բնօրինակին համապատասխանող։.

Ինչ է անհրաժեշտ աշխատանքային հոսքի համար

Բնօրինակ տեսանյութի ֆայլ, ոչ թե սեղմված սոցիալական ցանցերից ներբեռնված ֆայլ, եթե հնարավոր է

Նպատակային արտահանման չափը, օրինակ՝ 720p-ից մինչև 1080p, այլ ոչ թե անմիջապես 4K-ի անցնելը

Տեսանյութի սկալյատոր՝ աղմուկի նվազեցման, սրման, սեղմման վերականգնման և ժամանակային համապատասխանության տարբերակներով

Կարճ փորձարկման հոլովակ՝ դեմքերով, շարժումով, տեքստով և մանրամասն մակերեսներով

Թարթման, լուսապսակների, աղավաղված տեքստի, դեմքի հյուսվածքի և շարժվող եզրերի վերանայման ստուգաթերթիկ

Բնօրինակ տեսանյութի պահպանված պատճեն՝ համեմատության և անհրաժեշտության դեպքում բացահայտման համար

Օրինակային հրահանգ

Ամբողջ տեսանյութը մշակելուց առաջ օգտագործեք այս տեսակի հրահանգները

Բարձրացրեք այս 720p ուսուցողական տեսանյութի որակը մինչև 1080p: Առաջնահերթությունը տվեք բնական շարժմանը, կայուն եզրերին, ընթեռնելի առկա տեքստին և իրատեսական մաշկի հյուսվածքին: Օգտագործեք մեղմ սեղմման վերականգնում և ցածր սրություն: Մի հորինեք բացակայող տեքստ, լոգոներ, պիտակներ, քերծվածքներ, դեմքի մանրամասներ կամ սարքավորումների նշագրումներ: Խուսափեք կադրից կադր փայլից: Վերջնական արդյունքը պետք է ավելի պարզ լինի դիտման սովորական չափսերով, այլ ոչ թե արհեստականորեն սուր՝ կանգ առնելով և մեծացնելիս:.

Ինչպես փորձարկել այն

Մինչև 7 րոպեանոց ամբողջական ֆայլը մշակելը, արտահանեք 20 վայրկյան տևողությամբ նմուշ, որը ներառում է

Ուսուցչի դեմքը խոսելիս

Ձեռքը շարժվում է շրջանակի վրայով

Զգուշացնող պիտակ կամ փոքր տպագիր տեքստ

Հյուսվածքային մակերես, ինչպիսիք են գործվածքը, բետոնը, խոզանակված մետաղը կամ պլաստիկը

Տեսախցիկի համայնապատկեր կամ ցանկացած դողացող շարժում

Դիտեք նմուշը երկու անգամ՝ մեկ անգամ սովորական արագությամբ և մեկ անգամ կադր առ կադր դադարեցված։ Նորմալ արագությամբ ուշադրություն դարձրեք եզրերի շուրջ թարթմանը, սողացող հյուսվածքին կամ անբնական շարժմանը։ Դադարեցնելիս համեմատեք բնօրինակը և բարձրացված տարբերակները՝ ստուգելու համար, թե արդյոք տեքստը, կոճակները, գործիքները և դեմքի գծերը դեռ համընկնում են։.

Արդյունք

Նկարազարդ արդյունք՝ հիմնված մեկ 20 վայրկյան տևողությամբ փորձնական հոլովակի ժամանակաչափման և նույն կարգավորումների 7 րոպեանոց տեսանյութի վրա կիրառման վրա։.

Ձեռքով «չափափոխելու և սրելու» աշխատանքային գործընթացը տևեց մոտ 35 րոպե, ներառյալ արտահանումը և վերանայումը, բայց արդյունքում դասախոսի մազերի վրա տեսանելի փայլ և անվտանգության նշանների շուրջ լուսապսակներ հայտնվեցին։.

Արհեստական ​​բանականության աջակցությամբ աշխատանքային հոսքը տևեց մոտ 55 րոպե՝ ներառյալ փորձարկման արտահանումները, սակայն վերանայման խնդիրները առաջին արտահանման ժամանակ 8 տեսանելի խնդիրներից նվազեցին մինչև վերջնական արտահանման ժամանակ 2 աննշան խնդիր։.

Վերջնական տարբերակը հաջողությամբ անցավ վերանայման ստուգաթերթիկի 12 ստուգումներից 10-ը: Մնացած երկու խնդիրները ֆոնային տեքստի փոքր-ինչ մեղմությունն ու մեկ մութ անկյունում թույլ աղմուկն էին: Երկուսն էլ ընդունվեցին, քանի որ հրահանգիչը, սարքավորումները և անվտանգության քայլերը տեսողականորեն համապատասխան մնացին:.

Այստեղ իմաստալից չափանիշը «հասնված 1080p»-ը չէ։ Այն է՝ տեսանյութի քանի՞ վայրկյանում են շեղող արտեֆակտներ երևում նորմալ վերարտադրման ժամանակ։

Ի՞նչը կարող է սխալ ընթանալ

Մոդելը կարող է սրել սեղմման բլոկները և դրանք դարձնել իսկական հյուսվածքի տեսք ունեցող։.

Գեղեցիկ տեքստը կարող է ավելի վստահ տեսք ունենալ, բայց պակաս ճշգրիտ։.

Դեմքերը կարող են չափազանց հարթ դառնալ, եթե աղմուկի նվազեցումը չափազանց բարձր է։.

Շարժվող եզրերը կարող են փայլել, եթե գործիքը յուրաքանչյուր շրջանակը չափազանց անկախ է մշակում։.

4K արտահանումը կարող է ավելի վատ տեսք ունենալ, քան սահմանափակ 1080p արտահանումը, քանի որ մոդելը ստիպված է չափազանց շատ մանրամասներ հորինել։.

Ամենամեծ սխալը միայն կանգառված կադրը գնահատելն է։ Տեսանյութի մասշտաբի բարձրացումը պետք է բնական տեսք ունենա շարժման մեջ, այլ ոչ թե պարզապես տպավորիչ լինի որպես անշարժ պատկեր։.

Գործնական ուսուցողական նյութ

Տեսանյութի համար արհեստական ​​բանականության միջոցով մասշտաբի բարձրացումն ամենաարդյունավետն է, երբ սկզբում փորձարկում եք կարճ հատված, պահպանում չափավոր մասշտաբի բարձրացումը և գնահատում շարժումը՝ նախքան սրությունը։ Մի փոքր ավելի մեղմ, բայց կայուն արդյունքը սովորաբար ավելի լավ է, քան պարզ տարբերակը, որը թարթում է ամեն անգամ, երբ ինչ-որ մեկը շարժվում է։.

Հաճախակի տրվող հարցեր

Արհեստական ​​բանականության բարձրացում և դրա աշխատանքի սկզբունքը

Արհեստական ​​բանականության միջոցով մասշտաբի բարձրացումը (հաճախ անվանում են «գերլուծաչափ») մեծացնում է պատկերի լուծաչափը՝ կանխատեսելով մարզման ընթացքում սովորած օրինաչափություններից բարձր լուծաչափի բացակայող մանրամասները: Բիկուբիկ ինտերպոլյացիայի նման պիքսելները պարզապես ձգելու փոխարեն, մոդելը ուսումնասիրում է եզրերը, հյուսվածքները, դեմքերը և տեքստանման գծերը, այնուհետև ստեղծում է նոր պիքսելային տվյալներ, որոնք համապատասխանում են այդ սովորած օրինաչափություններին: Այն ավելի քիչ է «վերականգնում իրականությունը» և ավելի շատ «կայացնում է հավաստի կռահումներ», որոնք բնական են համարվում:.

Արհեստական ​​​​ինտելեկտի միջոցով չափափոխում ընդդեմ երկխորանարդ կամ ավանդական չափափոխման

Ավանդական մարգարտացման մեթոդները (ինչպիսին է երկխորանարդաձևը) հիմնականում ինտերպոլացնում են առկա պիքսելների միջև՝ հարթեցնելով անցումները՝ առանց իրական նոր մանրամասներ ստեղծելու: Արհեստական ​​​​ինտելեկտի մարգարտացման նպատակն է վերականգնել հավանական կառուցվածքը՝ ճանաչելով տեսողական ազդանշանները և կանխատեսելով, թե ինչ տեսք կունենան այդ ազդանշանների բարձր թույլտվությամբ տարբերակները: Ահա թե ինչու արհեստական ​​​​ինտելեկտի արդյունքները կարող են զգալիորեն ավելի սուր թվալ, ինչպես նաև այն պատճառով, որ դրանք կարող են ներմուծել արտեֆակտներ կամ «հորինել» մանրամասներ, որոնք առկա չեն եղել սկզբնաղբյուրում:.

Ինչու են դեմքերը կարող մոմոտ կամ չափազանց հարթ տեսք ունենալ

Մոմե դեմքերը սովորաբար առաջանում են ագրեսիվ աղմուկը հանելուց և հարթեցնելուց, զուգորդված սրացման հետ, որը հեռացնում է մաշկի բնական հյուսվածքը: Շատ գործիքներ աղմուկը և նուրբ հյուսվածքը նույն կերպ են մշակում, ուստի պատկերի «մաքրումը» կարող է ջնջել ծակոտիները և նուրբ մանրամասները: Հաճախակի օգտագործվող մոտեցումն է նվազեցնել աղմուկը և սրացումը, օգտագործել դեմքի պահպանման ռեժիմ, եթե հնարավոր է, ապա վերականգնել հատիկավորության մի փոքր հպում, որպեսզի արդյունքը ավելի քիչ պլաստիկ և ավելի լուսանկարչական տեսք ունենա:.

Արհեստական ​​բանականության բարձրացման տարածված արտեֆակտներ, որոնց պետք է ուշադրություն դարձնել

Տիպիկ նշաններից են եզրերի շուրջ լուսապսակները, կրկնվող հյուսվածքային նախշերը (ինչպես օրինակ՝ պատճեն-տեղադրած աղյուսները), ճռճռան միկրոկոնտրաստը և տեքստը, որը վերածվում է «գրեթե տառերի»: Դիֆուզիայի վրա հիմնված աշխատանքային հոսքերում կարող եք նաև տեսնել մանրամասների շեղում, որտեղ փոքր հատկանիշները աննկատելիորեն փոխվում են: Տեսանյութի դեպքում մանրամասների թարթումը և սողալը կադրերի միջև մեծ կարմիր դրոշներ են: Եթե այն լավ է երևում միայն ծայրահեղ մեծացման դեպքում, ապա կարգավորումները, հավանաբար, չափազանց ագրեսիվ են:.

Ինչպես են GAN-ը, CNN-ը և դիֆուզիոն բարձրակարգ ընկերությունները տարբերվում արդյունքներով

CNN-ի վրա հիմնված գերլուծաչափը հակված է ավելի կայուն և կանխատեսելի լինելու, բայց ուժեղ ճնշման դեպքում այն ​​կարող է «մշակված» թվալ: GAN-ի վրա հիմնված տարբերակները (ESRGAN ոճով) հաճախ ստեղծում են ավելի ուժեղ հյուսվածք և ընկալվող սրություն, բայց դրանք կարող են հալյուցինացիաներ առաջացնել սխալ մանրամասների համար, հատկապես դեմքերի վրա: Դիֆուզիայի վրա հիմնված բարձրացումը կարող է ստեղծել գեղեցիկ, հավանական մանրամասներ, սակայն դրանք կարող են շեղվել սկզբնական կառուցվածքից, եթե ուղղորդման կամ ուժի կարգավորումները չափազանց ուժեղ են:.

Գործնական կարգավորումների ռազմավարություն՝ «չափազանց արհեստական ​​ինտելեկտի» տեսքից խուսափելու համար

Սկսեք պահպանողական մոտեցումից. մեծացրեք պատկերի չափը 2× կամ 4×, նախքան ծայրահեղ գործոններին դիմելը: Եթե դեմքերը պլաստիկ տեսք ունեն, նվազեցրեք աղմուկի նվազեցման և սրման ռեժիմը և փորձեք դեմքի ճանաչման ռեժիմ: Եթե հյուսվածքները չափազանց ինտենսիվ են դառնում, նվազեցրեք մանրամասների բարելավումը և հետագայում մտածեք նուրբ հատիկավորության ավելացման մասին: Եթե եզրերը փայլում են, նվազեցրեք սրումը և ստուգեք լուսապսակի կամ արտեֆակտների ճնշումը: Շատ խողովակաշարերում «քիչ»-ը հաղթում է, քանի որ այն պահպանում է հավաստի ռեալիզմը:.

Հին սկանավորված կամ խիստ JPEG սեղմված պատկերների մշակում՝ մասշտաբի բարձրացումից առաջ

Սեղմված պատկերները բարդ են, քանի որ մոդելները կարող են բլոկային արտեֆակտները դիտարկել որպես իրական հյուսվածք և ուժեղացնել դրանք: Հաճախակի աշխատանքային հոսքը նախ արտեֆակտների հեռացումն է կամ արգելափակումից ազատումը, ապա մասշտաբի բարձրացումը, ապա միայն անհրաժեշտության դեպքում՝ լույսի սրացումը: Սկանավորման դեպքում նուրբ մաքրումը կարող է օգնել մոդելին կենտրոնանալ իրական կառուցվածքի, այլ ոչ թե վնասի վրա: Նպատակն է նվազեցնել «կեղծ հյուսվածքի ազդանշանները», որպեսզի մասշտաբի բարձրացումը չստիպված լինի վստահորեն ենթադրություններ անել աղմկոտ մուտքային տվյալներից:.

Ինչու է տեսանյութի բարձրացումը լուսանկարների բարձրացումից ավելի դժվար

Տեսանյութի մասշտաբի բարձրացումը պետք է լինի հետևողական բոլոր կադրերում, այլ ոչ թե միայն մեկ անշարժ պատկերի վրա։ Եթե մանրամասները թարթում են կադրից կադր, արդյունքը արագորեն շեղում է ուշադրությունը։ Տեսանյութին կենտրոնացած մոտեցումները օգտագործում են հարևան կադրերից ստացված ժամանակային տեղեկատվությունը՝ վերակառուցումը կայունացնելու և փայլող արտեֆակտներից խուսափելու համար։ Շատ աշխատանքային հոսքեր ներառում են նաև աղմուկի նվազեցում, որոշակի աղբյուրների համար ապամիահյուսում և հատիկների վերափոխում ըստ ցանկության, որպեսզի ամբողջ հաջորդականությունը թվա համակցված, այլ ոչ թե արհեստականորեն սուր։.

Երբ արհեստական ​​բանականության մասշտաբի բարձրացումը նպատակահարմար չէ կամ ռիսկային է հույսը դնելը

Արհեստական ​​​​ինտելեկտի միջոցով մասշտաբի բարձրացումը լավագույնս դիտարկվում է որպես բարելավում, այլ ոչ թե ապացույց: Բարձր ռիսկային համատեքստերում, ինչպիսիք են լրագրությունը, իրավական ապացույցները, բժշկական պատկերագրությունը կամ դատաբժշկական աշխատանքը, «հավատալի» պիքսելների ստեղծումը կարող է մոլորեցնող լինել, քանի որ այն կարող է ավելացնել մանրամասներ, որոնք չեն արձանագրվել: Ավելի անվտանգ շրջանակում այն ​​​​օգտագործելն է որպես օրինակ և բացահայտել, որ արհեստական ​​​​ինտելեկտի գործընթացը վերականգնել է մանրամասները: Եթե ​​ճշգրտությունը կարևոր է, պահպանեք բնօրինակները և փաստաթղթավորեք մշակման յուրաքանչյուր քայլը և կարգավորումը:.

Հղումներ

1. arXiv - Խորը ուսուցում պատկերի գերլուծաչափի համար. Հարցում - arxiv.org

2. arXiv - Պատկերի գերլուծաչափ՝ խորը կոնվոլյուցիոն ցանցերի միջոցով (SRCNN) - arxiv.org

3. arXiv - Իրական ESRGAN - arxiv.org

4. arXiv - ESRGAN - arxiv.org

5. arXiv - SR3 - arxiv.org

6. NVIDIA մշակող - NVIDIA DLSS - developer.nvidia.com

7. AMD GPUOpen - FidelityFX Super Resolution 2 - gpuopen.com

8. Համակարգչային տեսողության հիմնադրամ (CVF) բաց մուտք - BasicVSR: Տեսանյութի գերլուծաչափի էական բաղադրիչների որոնում (CVPR 2021) - openaccess.thecvf.com

9. arXiv - Գեներատիվ հակառակորդական ցանցեր - arxiv.org

10. arXiv - SRGAN - arxiv.org

11. arXiv - Ընկալման կորուստներ (Ջոնսոն և այլք, 2016) - arxiv.org

12. GitHub - Real-ESRGAN պահոց (սալիկների տարբերակներ) - github.com

13. Վիքիպեդիա - Բիկուբիկ ինտերպոլյացիա - wikipedia.org

14. Topaz Labs - Topaz-ի լուսանկար - topazlabs.com

15. Topaz Labs - Topaz տեսանյութ - topazlabs.com

16. Adobe-ի օգնության կենտրոն - Adobe Enhance > Գերլուծում - helpx.adobe.com

17. NIST / OSAC - Դատաբժշկական թվային պատկերների կառավարման ստանդարտ ուղեցույց (տարբերակ 1.0) - nist.gov

18. SWGDE - Դատաբժշկական պատկերի վերլուծության ուղեցույցներ - swgde.org

Գտեք արհեստական ​​բանականության վերջին նորույթները պաշտոնական արհեստական ​​բանականության օգնականների խանութում

Մեր մասին