সমস্যা
আপনার কাছে ৫০০টি প্রোডাক্ট ফটো আছে। প্রতিটির আকার ৪ এমবি। আপনার সবগুলোকে ৮০০×৮০০ রেজোলিউশনে, WebP ফরম্যাটে, প্রতিটি ১০০ কেবি এর কমে, এবং একই রকম নামে প্রয়োজন। মোট কাজটা খুব কম (প্রতিটি ছবি রিসাইজ করা ও কনভার্ট করা, প্রতিটি ছবির জন্য প্রায় ৮০ মিলিসেকেন্ড, মোট প্রায় ৪০ সেকেন্ড) — কিন্তু "প্রতিটি ছবি খুলুন, প্রসেস করুন, সেভ করুন, এবং পুনরাবৃত্তি করুন" এই প্রায়োগিক ওয়ার্কফ্লোটি অসহ্য করে তোলে।
ব্যাচ প্রসেসিং এই সমস্যা সমাধান করার জন্য বিদ্যমান। ৫০০টি ফাইল ড্রপ করুন, একটি অপারেশনে ৫০০টি প্রসেসড ফাইল ZIP ফরম্যাটে ফিরে পান।
সরল পদ্ধতি (এবং এটা কেন ভেঙে যায়)
সুস্পষ্ট বাস্তবায়ন: ফাইলগুলোর মধ্যে লুপ চালান, প্রতিটিতে কমপ্রেসর চালান, ফলাফলটি একটি অ্যারেতে পুশ করুন, তারপর শেষে ZIP করে ডাউনলোড করুন। এটি ১০টি ফাইলের জন্য কাজ করে। কিন্তু ৫০টি ফাইলে এটি ব্রাউজার ট্যাব ক্র্যাশ করে দেয়।
দুটি কারণ:
- মেমোরি। একটি ৪ এমবি JPEG, প্রসেসিংয়ের জন্য কাঁচা পিক্সেল ডেটায় ডিকোড করা হলে, এটি একটি ৫০ এমবি RGBA বাফারে (৪০০০×৩০০০×৪ বাইট) পরিণত হয়। এগুলোর ৫০টি একসাথে ধরে রাখা ২.৫ জিবি — যা অধিকাংশ ব্রাউজার ট্যাবের মেমোরি সীমার বেশি। ট্যাব কিল হয়ে যায়।
- UI ব্লকিং। ছবি প্রসেসিং CPU-ডিপেন্ডেন্ট। আপনি যদি এটি মেইন থ্রেডে করেন, তবে UI প্রতিটি ছবি প্রসেস করার সময় জমি যায়। পৃষ্ঠাটি অনডুখ হয়ে পড়ে। ব্যবহারকারীরা ভাবেন এটি ক্র্যাশ হয়েছে।
SynoxTools এটি কীভাবে পরিচালনা করে
তিনটি কৌশল:
১. Web Workers
সমস্ত ইমেজ প্রসেসিং একটি Web Worker-এ চলে — এটি একটি পৃথক থ্রেড যা DOM-কে স্পর্শ করতে পারে না, কিন্তু UI ব্লক ছাড়াই সংখ্যাগত হিসাব করতে পারে। মেইন থ্রেড রেসপন্সিভ থাকে; ওয়ার্কার ভারী কাজ করে। ব্যবহারকারী স্ক্রোল করতে পারে, ক্যান্সেল ক্লিক করতে পারে, ট্যাব পরিবর্তন করতে পারে — সবকিছু মসৃণ থাকে।
SynoxTools একটি একক স্থায়ী ওয়ার্কার ব্যবহার করে যা ছবিগুলোকে ক্রমাগত প্রসেস করে। মাল্টি-থ্রেডেড ওয়ার্কার (প্রতিটি CPU কোরে একটি) দ্রুত কিন্তু জটিল মেসেজ-পাসিং ওভারহেড নিয়ে আসে; সাধারণ ব্যাচ সাইজের (১০–৫০০ ছবি) জন্য, একটি একক ওয়ার্কার স্মার্ট সেডিউলিং সহ আদর্শ।
২. JSZip এর মাধ্যমে স্ট্রিমিং আউটপুট
মেমোরিতে ৫০০টি ফাইলের একটি অ্যারে তৈরি করার পরিবর্তে, SynoxTools প্রতিটি প্রসেসড ইমেজকে ZIP-এ সরাসরি তার সমাপ্তি অনুযায়ী স্ট্রিম করে। JSZip ইনক্রিমেন্টাল আপডেট সমর্থন করে — আপনি একটি ফাইল যোগ করতে পারেন, তারপর আরেকটি, এবং শেষে চূড়ান্ত ব্লব তৈরি করতে পারেন। ব্যাচ সাইজ নির্বিশেষে মেমোরি স্তর স্থির থাকে।
৩. প্রগ্রেস ফিডব্যাক সহ ক্রমাগত প্রসেসিং
প্রতিটি ছবি নেয় প্রায় ৮০ মিলিসেকেন্ড। ৫০০টি ছবির জন্য, মোট ৪০ সেকেন্ড। ব্যবহারকারী একটি প্রগ্রেস বার, একটি কাউন্টার ("১২৭ / ৫০০"), এবং বর্তমানে প্রসেস হওয়া ফাইল দেখতে পায়। বারটি প্রতিটি ছবির পর আপডেট হয়, শেষে নয়। মনস্তাত্ত্বিকভাবে, ধীরে ধীরে প্রগ্রেস সহ ৪০ সেকেন্ডের অপেক্ষা, কোনো ফিডব্যাক ছাড়া ৫ সেকেন্ডের অপেক্ষার চেয়ে অনেক কম মনে হয়।
সীমাবদ্ধতা এবং ট্রেড-অফ
- ৫০০টি ফাইল একসাথে হলে ব্যবহারিক সর্বোচ্চ। এর বেশি হলে, ZIP জেনারেশন ধাপটি (যা একক-থ্রেডেড) আসল ইমেজ প্রসেসিং থেকে বেশি সময় নেয়। ১০০০+ ইমেজের জন্য, সুপারিশ করা হয় ৫০০টির ব্যাচে ভাগ করে এবং সেগুলোকে ক্রমাগত চালানো।
- মেমোরি এখনও গুরুত্বপূর্ণ। আসল ফাইল (যা প্রসেস করা হচ্ছে) একটি ৫০ এমবি বাফারে ডিকোড হয়, তারপর ফলাফলটি ১০০ কেবি WebP-এ এনকোড হয়, এবং বাফারটি মুক্ত হয়। একটি ছবির বাফার একসাথে ধরে রাখা হয়, কিন্তু খুব বড় সোর্স ইমেজের (৬০০০×৪০০০) জন্য, এমনকি একটি বাফারও মেমোরি সীমা ছাড়িয়ে যেতে পারে।
- ব্রাউজার ট্যাব ক্র্যাশ হতে পারে যদি ব্যবহারকারী অনেক অন্যান্য ট্যাব খুলে থাকে বা কম RAM থাকে। SynoxTools ২০০টির বেশি ফাইলের ব্যাচের জন্য একটি সতর্কবার্তা দেখায়, যেন ব্যবহারকারী অন্যান্য ট্যাব বন্ধ করে দেয়।
সম্পূর্ণ ওয়ার্কফ্লো
১. ড্র্যাগ করে আনুন সর্বোচ্চ ৫০০টি ইমে�