பிரச்சினை

நீங்களுக்கு 500 தயாரிப்பு புகைப்படங்கள் உள்ளன. ஒவ்வொன்றும் 4 MB. அனைத்தையும் 800×800 அளவில், WebP வடிவத்தில், ஒவ்வொன்றும் 100 KB க்குள், ஒரே மாதிரியான பெயர்களுடன் வேண்டும். மொத்த வேலை சிறியது (மறுஅளவிடுதல் + ஒவ்வொன்றையும் மாற்றுதல், ~80 மில்லிவிந்தியன் ஒவ்வொரு படத்திற்கும், ~40 விந்தியன் மொத்தம்) — ஆனால், "ஒவ்வொன்றையும் திறந்து, செயலாக்கி, சேமித்து, மீண்டும்" என்ற நடைமுறை பணிப்பாய்வு இதை சும்மா தாங்க முடியாததாக்குகிறது.

கூட்டமாக செயலாக்குதல் இதைத் தீர்க்க உள்ளது. 500 கோப்புகளை விடுங்கள், ஒரே செயலில் ஒரு ZIP இல் 500 செயலாக்கப்பட்ட கோப்புகளைப் பெறுங்கள்.

எளிய அணுகுமுறை (மற்றும் ஏன் அது செயலிழக்கிறது)

தெளிவான செயலாக்கம்: கோப்புகளை ஒரு லூப்பில்�் செலுத்துங்கள், ஒவ்வொன்றிலும் கம்பிரஸரை இயக்குங்கள், முடிவை ஒரு அரையில் தள்ளுங்கள், பின்னர் இறுதியில் ZIP செய்து பதிவிறக்குங்கள். இது 10 கோப்புகளுக்கு வேலை செய்கிறது. 50 இல் உலாவி தாவல் செயலிழக்கிறது.

இரண்டு காரணங்கள்:

  1. நினைவகம். 4 MB JPEG, செயலாக்கத்திற்கான மூலப்பிக்சல் தரவாக டிகோட் செய்யப்படும்போது, 50 MB RGBA பஃபராக (4000×3000×4 பைட்டுகள்) மாறுகிறது. அந்த 50 பிக்சல் பஃபர்களை ஒரே நேரத்தில் வைத்திருப்பது 2.5 GB — பெரும்பாலான உலாவி தாவல்களின் நினைவக வரம்பை மீறுகிறது. தாவல் கொல்லப்படுகிறது.
  2. UI தடுப்பு. படச் செயலாக்கம் CPU-சார்ந்தது. அதை முக்கிய தண்டவாளத்தில் செய்தால், UI ஒவ்வொரு படத்தின் போதும் உறைந்துவிடுகிறது, மற்றும் பக்கம் பதிலளிக்காமல் போகிறது. பயனர்கள் அது செயலிழந்துவிட்டதாக நினைக்கிறார்கள்.

SynoxTools இதை எப்படி கையாளுகிறது

மூன்று வழிகள்:

1. Web Workers

அனைத்து படச் செயலாக்கமும் ஒரு Web Worker இல் இயங்குகிறது — ஒரு தனித்துவமான தண்டவாளம், இது DOM ஐத் தொடாமல் இருக்கலாம், ஆனால் UI ஐத் தடுக்காமல் எண்களை குறைக்க முடியும். முக்கிய தண்டவாளம் பதிலளிக்கும் நிலையில் இருக்கிறது; தொழிலாளி கடினமான வேலையைச் செய்கிறது. பயனர் ஸ்க்ரோல் செய்யலாம், ரத்து செய்யலாம், தாவல்களை மாற்றலாம் — எல்லாம் நிச்சயமாக சீராக இருக்கிறது.

SynoxTools ஒரு தொடர்ச்சியான தொழிலாளியைப் பயன்படுத்துகிறது, அது படங்களை வரிசையாக செயலாக்குகிறது. பல-தண்டவாள தொழிலாளிகள் (ஒவ்வொரு CPU கோருக்கு ஒன்று) வேகமாக இருந்தாலும், அவை சிக்கலான செய்தி-அனுப்புதல் ஓட்டைக் கொண்டுள்ளன; வழக்கமான கூட்ட அளவுகளுக்கு (10-500 படங்கள்), ஒரு தொழிலாளி மற்றும் செயல்திறனான அட்டவணையுடன் ஒன்றே சிறந்த விடைபெறும் இடம்.

2. JSZip வழியாக ஸ்ட்ரீமிங் வெளியீடு

நினைவகத்தில் 500-கோப்பு அரையை உருவாக்குவதற்குப் பதிலாக, SynoxTools செயலாக்கப்பட்ட ஒவ்வொரு படத்தையும் அது முடிந்தவுடன் நேரடியாக ZIP இல் ஸ்ட்ரீம் செய்கிறது. JSZip அதிகரிக்கும் புதுப்பித்தல்களை ஆதரிக்கிறது — ஒரு கோப்பைச் சேர்க்கலாம், பின்னர் மற்றொன்றைச் சேர்க்கலாம், இறுதியில் இறுதி ப்ளாபை உருவாக்கலாம். கூட்ட அளவைப் பொருட்படுத்தாமல் நினைவகம் சீராகவே இருக்கிறது.

3. முன்னேற்ற கருத்தறிகையுடன் வரிசையான செயலாக்கம்

ஒவ்வொரு படமும் ~80 மில்லிவிந்தியன். 500 படங்களுக்கு, அது 40 விந்தியன் மொத்தம். பயனர் ஒரு முன்னேற்றப் பட்டையைக் காண்கிறார், ஒரு எண்ணிக்கை ("127 / 500"), மற்றும் தற்போது செயலாக்கப்படும் கோப்பு. படம் ஒவ்வொன்றும் முடிந்த பிறகு பட்டை புதுப்பிக்கப்படுகிறது, இறுதியில் அல்ல. உளவியல் ரீதியாக, நிலையான முன்னேற்றத்�துடன் ஒரு 40-விந்தியன் காத்திருப்பு ஒரு 5-விந்தியன் காத்திருப்பைக் காட்டிலும் மிகவும் குறைவாகத் தோன்றுகிறது.

வரம்புகள் மற்றும் தாக்கங்கள்

  • ஒரே நேரத்தில் 500 கோப்புகளே நடைமுறை அதிகபட்சம். அதற்கு மேல், ZIP உருவாக்க படிநிலை (அது ஒரு தண்டவாளம் சார்ந்தது) உண்மையான படச் செயலாக்கத்தை விட நீண்ட நேரம் எடுக்கி�