Y en el caso que escribí mal el nombre del componente al crearlo, como le hago para eliminar o renombrar?

solamente te paras en la carpeta que te crea, le das click derecho, eliminar, y lo vuelves a generar bien.

No recomendaría renombrarlo porque tienes muchas dependencias. Puedes usar simplemente angular-cli para generar otro:

Y eliminar el folder del otro componente.

P.D. No te olvides de quitar la dependencia en el array de declarations del módulo en el que esté importado tu componente.