Am constatat că autocercetarea funcționează cel mai bine (și singurul) pentru optimizarea vitezei, unde: 1. Obiectivul este un scalar unic (timp de ceasul de perete), astfel încât fiecare experiment să aibă un semnal clar de tipul "mai bun sau mai rău" 2. Degradarea calității este ieftină de evaluat, de exemplu un simplu MSE/pixel-diferență față de ieșirea de bază oferă o poartă automată de trecere/eșec 3. Spațiul de căutare este format din micro-optimizări: casting dtype, cuantificare, trucuri de cache, programare de evaluare, unde fiecare modificare este mică, independentă și instantaneu comparabilă De asemenea, fii atent la auto-compactare când pierde contextul a ceea ce ai încercat deja.