Bon, j'ai trouvé.
Les toolchains de scratchbox, comme le premier toolchain que j'ai généré avec buildroot, compilent en hardware floating point, et c'est le kernel qui doit "trapper" les illegal instructions. Il faut donc enabler le floating point emulation, ce que j'avais bien fait, mais apparemment, il reste un souci. Avec mon buildroot, j'avais l'écran de login, mais le shell crashait.
Maintenant, je compile en software floating point, et tout roule. J'ai une image qui me permet de me logguer en ssh et de lancer python...
Je pourrai réessayer ce toolchain avec scratchbox, ou retenter l'aventure openembedded, qui apporte quand même l'avantage de générer des packages ipkg installables individuellement plutôt qu'une image complète qu'il faut synchroniser avec ce qui est déjà installé.

Mais ce sera pour plus tard, ce soir je regarde un film avec madame...