Hola
A mi me parece que tenés que crear un archivo (puede ser un .txt o un .dat) que guarde los datos del TextBox (en el momento que oprimís guardar)
Posteriormente al abrir el programa, que convoque a dicho archivo para mostrar los datos guardados.
¿Se trata de eso?
Suerte
Juan Carlos