Todos los archivos son binarios, no? incluyendo a los de texto plano, o cuál sería la definición de archivo binario

Un documento binario es un archivo fuente ya procesado; es decir listo para ser ejecutado por la computadora e incomprensible para ti.

En el caso de el desarrollo de software, por ejemplo tu tienes tu codigo fuente, depsues ese codigo sera procesado por un compilador para generar codigo maquina. En el caso de lo interpretes ellos tambien son programas de software que una maquina puede leer.

Al final todo se traduce a binario para la computadora, sí, pero básicamente un archivo binario es ese archivo que es un ejecutable, es decir, si tú arrastras ese archivo (por ejemplo una imagen) a tu editor de código lo que sucederá es que te mostrará una serie de caracteres extraños incomprensibles (esto depende, algunos editores de código son inteligentes y muestran la imagen), pero si haces lo mismo con cualquier ejecutable, pasará lo mismo.

En cambio un archivo de texto plano son los archivos fuentes o cualquier archivo que contenga texto únicamente, es decir, si tú lo arrastras a un editor de código puedes ver texto legible ^^