Es geht mir um performance
Dann wirf erstmal einen Profiler an. Die hat jeder Browser heute an Board.
ich hab mir überlegt ob ich das Event in größeren abständen machen soll
Das macht man häufig, unter dem Stichwort "Event Throttling" oder "Event Debouncing" solltest du fündig werden.