Zweiter xserver startet per default KDE -- soll er aber nicht!

Folgende Problematik: Wenn ich z.b. über startx -- :2 oder xinit -- :4 etc. einen neuen xserver starten will, öffnet sich gleich, ohne weiteres, KDE und wenn ich KDE beende, beendet auch x. Kann mir vllt jemand sagen, wie ich zu einem Barebone-x komme, also ohne Fenster-Manager und am besten auch ohne grafischen Login etc.?