Vill du skriva i python men är intresserad av hastighet kan det vara värt att slänga ett öga på
http://pypy.org/ som man nog får säga har lämnat proof-of-concept-stadiet för ett tag sen.
Tyvärr är stödet för just numpy rätt kass, men jag undrar om inte det du ägnar dig åt kan tjäna en del på jittandet.
Men jag får villigt erkänna att matematikjonglerande är något jag är jävligt dålig på, så mina gissningar är troligen helt åt helvete :)
Men det är onekligen så att python inte lämpar sig till allt. Right tool for the job, och så...