Si, como mencionas, el numero de SSN que te asignaron es tuyo para siempre. Sobre lo de estar activo, digamos que hay varios tipos de usos para el SSN:
1. Es necesario para buscar empleo y recibir paga
2. Es tu numero de identificacion para pagar impuestos.
3. Se usa como numero de identificacion nacional para sacar licencias, abrir cuentas de banco, cuenta de luz, agua, telefono, etc. Aqui es donde tambien entra la historia de credito.
Tu numero no esta activo para trabajar, porque eso depende de tu estatus de inmigracion.
Pero lo podrias usar para otras cosas. Por ejemplo, si compras una casa y quieres poner tu SSN en la cuenta de luz, puedes hacerlo, o si quieres comprar un celular con plan postpago. Para cosas bancarias, podrias ponerlo aunque te conviene igual poner que tu estatus es de no residente para que no te deduzcan impuestos que no corresponden (asumo que no vives en USA).
Si te toca pagar impuestos, entonces tu declaracion iria con tu SSN
SI algun dia vuelves a venir con una visa que te permite trabajar entonces tu numero vuelve a tener autorizacion para trabajar y recibir paga.