Pourquoi tu ne compiles pas "tout le reste" en module?
A part prendre un peu de place, ça ne fait pas pas de mal chose.

Edit:

j'utilise une debian et pourtant je recompile mon kernel.

Mais la plus part de ce que je n'utilise pas ou rarement, je les garde en modules au cas où.