Masalah peningkatan skala

Anda mempunyai foto 500×500. Anda memerlukannya pada saiz 2000×2000 — untuk cetakan, paparan retina, atau sepanduk. Foto tersebut mempunyai 250,000 piksel. Anda memerlukan 4 juta. 3.75 juta piksel yang hilang itu mesti datang dari sesuatu.

Ini adalah masalah peningkatan skala. Anda tidak dapat mencipta maklumat yang tidak dirakam — tetapi anda dapat menganggarkannya. Kualiti anggaran menentukan sama ada imej yang ditingkatkan skala kelihatan tajam atau seperti satu kekaburan.

Mengapa peningkatan skala yang mudah gagal

Pendekatan yang paling mudah: menggandakan setiap piksel. Sebuah imej 500×500 menjadi 1000×1000 dengan menukar setiap piksel kepada blok 2×2. Hasilnya adalah berpiksel — berblok, dengan segi empat yang kelihatan. Ini adalah interpolasi "jiran terdekat" (nearest-neighbor), dan ia adalah apa yang setiap penampil imej lakukan pada tahun 1995.

Langkah seterusnya: interpolasi bilinear. Untuk setiap piksel baru, puratakan 4 piksel sumber terdekat. Hasilnya adalah licin, tetapi kabur — tepi kehilangan definisi, teks menjadi lembut, dan butir halus lenyap. Interpolasi bicubic (puratakan 16 piksel sumber dengan pemberatan kubik) sedikit lebih baik, tetapi masih menghasilkan halo yang kelihatan di sekeliling tepi.

Masalah asas: kaedah-kaedah ini tidak tahu apa itu imej. mereka memperlakukan setiap piksel dengan cara yang sama — satu piksel di tengah langit biru mendapat rawatan yang sama seperti satu piksel di tepi satu coretan teks yang tajam. Hasilnya adalah sederhana dan seragam.

Lanczos: asas kualiti

Pemampatan semula Lanczos menggunakan inti sinc-windowed — satu fungsi matematik yang, secara teori, membinas semula semula isyarat berterusan asal dari sampelnya. Amatnya, ia menghasilkan hasil yang lebih tajam daripada bicubic kerana ia mengekalkan butir frekuensi tinggi (tepi, teks, tekstur halus) dengan lebih baik.

Kompromisnya adalah pengiraan. Lanczos dengan saiz inti 3 (piawai) memerlukan 36 piksel sumber bagi setiap piksel output (tetingkap 6×6), berbanding dengan 16 bicubic. Untuk peningkatan 4× bagi imej 1000×1000, itu adalah 144 juta pemikiran piksel. Pada CPU moden, ini mengambil masa 2-5 saat — boleh diterima untuk satu-satu, perlahan untuk masa nyata.

Lanczos adalah asas bagi peningkatan skala berkualiti. Setiap alatan profesional — Photoshop, GIMP, ImageMagick — menawarkannya. Alatan berasaskan penyemak imbas yang menggunakan Lanczos menghasilkan hasil yang hampir tidak dapat dibezakan dari perisian desktop.

Peningkat skala AI: janjinya

Peningkat skala AI (real-ESRGAN, SwinIR, Topaz Gigapixel) mengambil pendekatan yang berbeza. Sebaliknya formula matematik, mereka menggunakan rangkaian neural yang dilatih pada jutaan pasangan imej: versi resolusi rendah dan resolusi tinggi bagi foto yang sama. Rangkaian itu belajar untuk "halusinasi" butir yang hilang — menambah tekstur, menajamkan tepi, dan juga membinasema semula teks.

Untuk jenis imej tertentu, hasilnya adalah menakjubkan. Sebuah foto 500×500 muka, dinaikkan skala 4× oleh model AI yang baik, boleh kelihatan seperti ia asalnya diambil pada 2000×2000. Model itu "tahu" bagaimana muka kelihatan, dan mengisi liang, rambut, dan tekstur kulit yang tidak dirakam oleh sumber resolusi rendah.

Tetapi terdapat satu tangkapan: AI menghalusinasi. Ia menambah butir yang tidak ada dalam asal — dan kadang-kadang butir itu adalah salah. Nombor pendaftaran yang kabur, dinaikkan skala oleh AI, mungkin menunjukkan nombor yang kelihatan masuk akal tetapi salah. Sebuah foto resolusi rendah sebuah bangunan, dinaikkan skala, mungkin mendapat tingkap dan bata yang tidak wujud. Ini adalah "bias model" — AI menghasilkan apa yang ia fikir sepatutnya ada, bukan apa yang sebenarnya ada.

Bilakah menggunakan yang mana

Gunakan Lanczos apabila:

  • Anda memerlukan peningkatan skala yang tepat dan setia (tiada butir yang dihalusinasi).
  • Imej mempunyai butir halus yang mesti dipelihara dengan tepat (teks, rajah, seni piksel).
  • Anda memerlukan hasil yang boleh diramal dan boleh disalin semula.
  • Anda bekerja dalam penyemak imbas (tiada muat turun model diperlukan).

Gunakan peningkatan skala AI apabila:

  • Imej adalah foto subjek biasa (muka, landskap, bangunan).
  • Anda mahu imej "kelihatan baik" walaupun butir itu dicipta.
  • Anda boleh menanggung muat turun model 10-50 MB.
  • Anda bersedia menerima bahawa butir yang dinaikkan skala mungkin tidak tepat.

Untuk kebanyakan kegunaan — grafik web, foto lama, siaran media sosial — Lanczos adalah mencukupi dan lebih pantas. Untuk pemulihan foto profesional atau cetakan pada saiz besar, peningkatan skala AI adalah berbaloi untuk masa tambahan.

Trik penajaman

Sebarang kaedah peningkatan skala mendapat faedah daripada satu lapisan penajaman selepasnya. Sebabnya: peningkatan skala menyebarkan butir asal merentasi lebih banyak piksel, yang secara visual melembutkan imej. Topeng tajam yang ringan — yang mengesan tepi dan meningkatkan kontras tempatan — mengembalikan ketajaman yang dirasakan tanpa menambah maklumat baru.

Kuantiti penajaman adalah penting. Terlalu sedikit, dan imej yang dinaikkan skala kelihatan lembut. Terlalu banyak, dan anda mendapat halo — garis terang atau gelap di sekeliling tepi yang kelihatan tidak semula jadi. Tetapan tipikal: jumlah 0.5, jejari 0.7px, ambang 2. Ini meningkatkan tepi tanpa memperkenalkan artifak.

Peningkatan skala untuk cetakan

Cetakan memerlukan 300 DPI (titik per inci). Sebuah foto untuk cetakan 4×6 inci memerlukan 1200×1800 piksel. Sebuah foto resolusi web (800×600) perlu dinaikkan skala 1.5× secara mendatar dan 3× secara menegak untuk memenuhi keperluan ini.

Untuk cetakan, Lanczos dengan penajaman biasanya lebih baik daripada AI. Cetakan menunjukkan setiap piksel — tekstur yang dihalusinasi oleh AI yang kelihatan baik di skrin boleh kelihatan "salah" di atas kertas, terutamanya untuk muka dan tangan di mana penonton mempunyai jangkaan yang kuat.

Privasi

Peningkatan skala boleh berjalan sepenuhnya dalam penyemak imbas. Algoritma Lanczos adalah tulen matematik — tiada data meninggalkan peranti. Model AI juga boleh berjalan dalam penyemak imbas melalui ONNX Runtime Web atau TensorFlow.js, walaupun muat turun model (10-50 MB) adalah kos satu masa. Mana-mana cara, tiada imej dimuat naik ke pelayan.

Masa depan

Peningkatan skala AI membaik dengan pantas. Peningkat skala berasaskan difusi (teknologi yang sama di sebalik Stable Diffusion) kini dapat menghasilkan pembesaran 8× yang tidak dapat dibezakan secara visual dari foto resolusi tinggi asal — untuk jenis imej yang betul. Kompromisnya adalah kelajuan: satu peningkatan skala difusi mengambil masa 10-30 saat pada GPU, minit pada CPU.

Untuk masa ini, pilihan praktikal bagi kebanyakan pengguna adalah Lanczos + penajaman. Ia pantas, percuma, berjalan dalam mana-mana penyemak imbas, dan menghasilkan kualiti yang "cukup baik" untuk 90% kegunaan. Peningkatan skala AI adalah pilihan yang betul apabila kualiti lebih penting daripada kelajuan, dan apabila jenis imej itu adalah model AI yang dilatihinya.