Bueno, yo lo primero que hago para mejorar el rendimiento en linux es hacer el kernel lo más chico posible, sacando todas las cosas que no voy a usar, o que si las voy a usar, va a ser en un futuro.
eso mejora mucho el rendimiento y se nota mucho y es bastante bueno si tenes una pc lentucha como la mia, otra cosa que se puede hacer es sacar los modulos y opciones que hay de más en los rc, en la carpeta rc.d, los editas, y comentas las cosas que no necesites, aparte mejoras la seguridad, por defecto es visto que se abren telnet y muchos otros puertos que pueden hacer vulnerable a tu máquina, asi que tambien es necesario mirar el inet.conf, o tambien sacarlo directamente.
cuando inicias startx probá poniendo
exec startx, esto mata al proceso padre (bash), lo cual libera 800 K aprox me memoria.
Bueno, cuando se me ocurran mas posteo