Bueno, resulta que tiene que ser en un formato RIFF (little-endian) de 8 bits, (WAVE).
Resulta que si hago un cat a un archivo WAVE y lo "pongo" en /dev/dsp sonara bien si es de 8 bits, es decir cat file.wav > /dev/dsp
Se puede usar las librerias de OSS para controlar el flujo, por defecto es de 8 Khz