Also es liegt divinitiv am M Fahrwerk denke ich. Ich hatte dies Gefühl ganz deutlich ab ner Geschwindigkeit von ca.160Km/h im e46 & im jetzigen e90 auch. Beim e46 kamen Federn rein aber dieses Gefühl ging nicht so ganz weg.
Als ich mir dann den e90 gekauft habe, hab ich mir ein gutes Gewinde Fahrwerk gegönnt (KW v2 Inoxline) uns siehe da, das schwammige Fahrgefühl komplett weg. Ich kann gemütlich bei 250Km/h mit einer Hand lenken. Darauf habe ich dann bei meinem e46 auch das KW v2 Inoxline verbaut um zu gucken ob es wirklich am Fahrwerk liegt, und siehe da
auch im e46 kann ich jetzt problemlos die 250Km/h fahren und dabei mit einer Hand lenken.
FAZIT: Das M Fahrwerk ist echt
und mit tiefer legeungs Federn ist es leider auch nicht getan.
Hoffe ich konnte Dir etwas helfen 
Ein gutes Fahrwerk wird Dir da bestimmt weiter helfen, da bin ich mir mehr ala sicher 