مسئله

شما ۵۰۰ عکس محصول دارید. هر کدام ۴ مگابایت هستند. شما به همه‌ی آن‌ها با ابعاد ۸۰۰×۸۰۰، در فرمت WebP، و هر کدام کمتر از ۱۰۰ کیلوبایت، و با نام‌گذاری یکپارچه نیاز دارید. کل کار کوچک است (تغییر اندازه + تبدیل هر عکس، حدود ۸۰ میلی‌ثانیه برای هر تصویر، حدود ۴۰ ثانیه در مجموع) — اما جریان کار عملیاتی از "باز کردن هر عکس، پردازش، ذخیره، تکرار" آن را غیرقابل تحمل می‌کند.

پردازش دسته‌ای برای حل این مشکل وجود دارد. ۵۰۰ فایل را در آن رها کنید، ۵۰۰ فایل پردازش‌شده را در یک ZIP دریافت کنید، همه در یک عملیات.

روش ساده (و اینکه چرا شکست می‌خورد)

پیاده‌سازی واضح: حلقه‌ای روی فایل‌ها اجرا کنید، فشرده‌ساز را روی هر کدام اجرا کنید، نتیجه را به یک آرایه اضافه کنید، سپس در پایان ZIP کنید و دانلود کنید. این برای ۱۰ فایل کار می‌کند. در ۵۰ فایل، تب مرورگر را کرش می‌کند.

دو دلیل:

  1. حافظه. یک تصویر ۴ مگابایتی JPEG، هنگام دیکود شدن به داده‌های خام پیکسلی برای پردازش، به یک بافر RGBA ۵۰ مگابایتی (۴۰۰۰×۳۰۰۰×۴ بایت) تبدیل می‌شود. نگه داشتن ۵۰ مورد از این‌ها به صورت همزمان ۲.۵ گیگابایت است — بالاتر از محدوده حافظه اکثر تب‌های مرورگر. تب کشته می‌شود.
  2. مسدودسازی رابط کاربری. پردازش تصویر به CPU وابسته است. اگر آن را در thread اصلی انجام دهید، رابط کاربری در حین پردازش هر تصویر متوقف می‌شود و صفحه غیرپاسخگو می‌شود. کاربران فکر می‌کرده کرش کرده است.

SynoxTools چگونه آن را مدیریت می‌کند

سه ترفند:

1. Web Workers

تمام پردازش تصویر در یک Web Worker اجرا می‌شود — یک thread جداگانه که نمی‌تواند به DOM دسترسی داشته باشد اما می‌تواند بدون مسدودسازی رابط کاربری، محاسبات سنگین را انجام دهد. thread اصلی پاسخگو می‌ماند؛ worker کارهای سنگین را انجام می‌دهد. کاربر می‌تواند اسکرول کند، روی لغو کلیک کند، تب‌ها را عوض کند — همه چیز روان می‌ماند.

SynoxTools از یک worker پایدار و تک‌نخی استفاده می‌کند که تصاویر را به ترتیب پردازش می‌کند. workers چندنخی (یک هسته برای هر CPU) سریع‌تر هستند اما پیچیدگی بیشتری در انتقال پیام ایجاد می‌کنند؛ برای اندازه‌های معمولی دسته (۱۰–۵۰۰ تصویر)، یک worker با برنامه‌ریزی هوشمند، نقطه بهینه است.

2. خروجی استریمینگ با JSZip

به جای ساختن یک آرایه ۵۰۰ تایی در حافظه، SynoxTools هر تصویر پردازش‌شده را مستقیماً به ZIP هنگام تکمیل آن استریم می‌کند. JSZip به‌روزرسانی‌های تدریجی را پشتیبانی می‌کند — می‌توانید یک فایل اضافه کنید، سپس دیگری، و در نهایت blob نهایی را در پایان تولید کنید. حافظه ثابت می‌ماند، صرف‌نظر از اندازه دسته.

3. پردازش ترتیبی با بازخورد پیشرفت

هر تصویر حدود ۸۰ میلی‌ثانیه زمان می‌برد. برای ۵۰۰ تصویر، این ۴۰ ثانیه در مجموع است. کاربر یک نوار پیشرفت، یک شمارنده ("۱۲۷ / ۵۰۰") و فایل فعلی در حال پردازش را می‌بیند. نوار پس از هر تصویر، نه در پایان، به‌روز می‌شود. از نظر روان‌شناسی، انتظار ۴۰ ثانیه‌ای با پیشرفت مداوم بسیار کوتاه‌تر از انتظار ۵ ثانیه‌ای بدون هیچ بازخوردی احساس می‌شود.

محدودیت‌ها و مبادلات

  • ۵۰۰ فایل به صورت همزمان حداکثر عملی است. بالاتر از آن، مرحله تولید ZIP (که تک‌نخی است) زمان بیشتری نسبت به پردازش واقعی تصویر می‌برد. برای ۱۰۰۰+ تصویر، جریان کار توصیه‌شده این است که به دسته‌های ۵۰۰ تایی تقسیم شوند و به ترتیب اجرا شوند.
  • حافظه همچنان مهم است. فایل اصلی (در حال پردازش) به یک بافر ۵۰ مگابایتی دیکود می‌شود، سپس نتیجه دوباره به یک WebP ۱۰۰ کیلوبایتی enkod می‌شود، سپس بافر آزاد می‌شود. فقط یک بافر تصویر در هر لحظه نگه داشته می‌شود، اما برای تصاویر منبع بسیار بزرگ (۶۰۰۰×۴۰۰۰)، حتی یک بافر هم می‌تواند محدوده حافظه را فشار دهد.
  • کرش کردن تب مرورگر ممکن است اگر کاربر تب‌های دیگری را باز کرده یا رم کم داشته باشد، رخ دهد. SynoxTools برای دسته‌های بالای ۲۰۰ فایل، هشداری نمایش می‌دهد و توصیه می‌کند کاربر تب‌های دیگر را ببندد.

جریان کار کامل

  1. کشیدن و رها کردن تا ۵۰۰ عکس (یا کلیک برای مرور، یا چسباندن از کلیپ‌بورد).
  2. پیکربندی: فرمت خروجی (WebP, JPEG, PNG)، کیفیت، ابعاد تغییر اندازه.
  3. کلیک روی "پردازش". نوار پیشرفت را تماشا کنید.
  4. دانلود ZIP نتیجه.

برای جریان‌های کاری تکراری (مثلاً به‌روزرسانی‌های هفتگی کاتالوگ محصول)، همان پیکربندی قابل استفاده مجدد است — پردازشگر دسته‌ای تنظیمات آخر شما را از طریق localStorage به خاطر می‌سپارد.

زمان استفاده از پردازش دسته‌ای در مقابل تک‌تک

  • دسته‌ای برای: عملیات یکسان روی فایل‌های زیاد (تغییر اندازه همه به ۸۰۰×۸۰۰، فشرده‌سازی همه به کیفیت ۸۰٪).
  • تک‌تک برای: یک تصویر که نیاز به تنظیم دقیق دارد (یک تصویر اصلی، یک اثر از مجموعه).

ابزار دسته‌ای برای حجم است. ابزارهای تک‌تک برای هنر است. از هر دو استفاده کنید.