¿Cuál es el beneficio de escribir en una ubicación temporal y luego copiarlo en el destino previsto?

Estoy escribiendo una aplicación que funciona con imágenes satelitales, y mi jefe me pidió que mirara algunas de las aplicaciones comerciales y ver cómo se comportan. Encontré un comportamiento extraño y luego, mientras lo buscaba, también lo encontré en otras aplicaciones estándar.

Estos programas primero escriben en la carpeta temporal y luego la copian en el destino deseado.

Ejemplo: 7zip primero extrae en la carpeta temporal, y luego copia los datos extraídos a la ubicación en la que le había pedido que extraiga los datos.

Veo varios problemas con este enfoque:

1. Es posible que la carpeta temporal no tenga suficiente espacio, mientras que la ubicación prevista podría tener tanto espacio.

2. Si se trata de un archivo grande, la operación de copia puede llevar un tiempo no despreciable.

Lo pensé mucho, pero no pude ver un solo punto positivo para hacer esto. ¿Me estoy perdiendo algo o hay un beneficio real al hacerlo?

Algunas razones que se me ocurren:

• En la mayoría de las plataformas, los movimientos de archivos son atómicos, pero las escrituras de archivos no lo son (especialmente si no puede escribir todos los datos de una vez). Entonces, si tiene el patrón típico de productor / consumidor (un proceso produce archivos, el otro mira un directorio y recoge todo lo que encuentra), escribir primero en una carpeta temporal y solo luego moverse a la ubicación real significa que el consumidor nunca puede ver un Archivo inacabado.
• Si el proceso que escribe el archivo termina a la mitad, tiene un archivo roto en su disco. Si está en una ubicación real, debe encargarse de limpiarlo usted mismo, pero si está en una ubicación temporal, el sistema operativo se encargará de ello.
• Si el archivo se crea mientras se está ejecutando un trabajo de respaldo, el trabajo puede recoger un archivo incompleto; Los directorios temporales generalmente se excluyen de las copias de seguridad, por lo que el archivo solo se incluirá una vez que se haya movido al destino final.
• El directorio temporal puede estar en un sistema de archivos rápido pero volátil (por ejemplo, un disco ram), lo que puede ser beneficioso para cosas como descargar varios fragmentos del mismo archivo en paralelo o realizar un procesamiento en el lugar en el archivo con muchas búsquedas. Además, los directorios temporales tienden a causar más fragmentación que los directorios con lecturas, escrituras y eliminaciones menos frecuentes, y mantener el directorio temporal en una partición separada puede ayudar a mantener baja la fragmentación de las otras particiones.

TL; DR: se reduce principalmente a la atomicidad, es decir, desea hacerlo para que (en la ubicación final) el archivo esté completo o no esté allí en ningún momento dado.

Esto parece ser un problema en Windows, más específicamente relacionado con la forma en que se gestiona la operación de arrastrar y soltar.

Los desarrolladores del cliente WINSCP han desarrollado su propia extensión de shell, que anula este comportamiento de arrastrar y soltar y permite colocar el archivo en la carpeta correcta de inmediato. Explican el truco en su documentación y, más interesante, cuál es el problema y cómo lo resolvieron.

Esta es la parte interesante:

La mecánica de arrastrar y soltar de Windows no permite que la aplicación de origen de la operación de arrastrar y soltar descubra fácilmente dónde se sueltan los archivos. Depende de la aplicación de destino (generalmente el Explorador de Windows) transferir archivos al destino. Es bastante razonable, porque la aplicación de origen difícilmente puede transferir archivos a todos los destinos posibles. Tenga en cuenta que puede colocar archivos no solo en un directorio, sino incluso en un archivo ZIP (o cualquier otro archivo), directorio remoto (a través de FTP, SFTP, SCP, ...), basura, ...

Obviamente, incluso el Explorador de Windows (o cualquier otra aplicación de destino, como WinZip) no puede descargar archivos de ninguna fuente posible (particularmente no conoce SFTP / SCP).

Además, específicamente para 7Zip: el usuario ray023 responde a esta pregunta en las Preguntas y respuestas de SuperUser Stack: https://superuser.com/a/422463

Básicamente, si en lugar de arrastrar y soltar su archivo utiliza el método "extraer aquí" disponible en 7-ZIP y Winrar, los archivos se encuentran directamente en el directorio correcto.

Si tiene que hacer algún tipo de procesamiento de datos en el archivo (decodificar / convertir / etc.), entonces es mejor usar un archivo temporal y cuando se complete, y solo si se completa, transferir el resultado al destino final.

Beneficios:

1. Solo los archivos completos llegan al destino
2. El archivo temporal puede (debería) residir en medios rápidos
3. Evite la fragmentación en el archivo final
4. Permite el uso de otros medios como destino final (ftp, nube, lo que sea)
5. Los archivos temporales anulados son más fáciles de limpiar

No veo beneficios reales de escribir directamente al destino mientras proceso los datos.