Mover millones de archivos a un directorio diferente con patrones de nombre específicos

Tengo millones de archivos con la siguiente nomenclatura en una máquina Linux:

1559704165_a1ac6f55fef555ee.jpg

Los primeros 10 dígitos son marcas de tiempo y los seguidos por un _son identificadores específicos. Quiero mover todos los archivos que coincidan con identificadores de nombre de archivo específicos a una carpeta diferente.

Intenté esto en el directorio con archivos

find . -maxdepth 1 -type f | ??????????_a1ac*.jpg |xargs mv -t "/home/ubuntu/ntest"

Sin embargo, recibo un error que indica:

bash 1559704165_a1ac6f55fef555ee.jpg: command not found

Cuando lo intenté, mv ??????????_a1ac*.jpg recibo una lista de argumentos de error demasiado largo. Tengo al menos 15 patrones de nombre de archivo diferentes. ¿Cómo los muevo?

Deberías usar:

find . -maxdepth 1 -type f -name '??????????_a1ac*.jpg' \
-exec mv -t destination "{}" +

Entonces maxdepth 1significa que desea buscar en el directorio actual sin subdirectorios.

type f significa buscar solo archivos.

name '??????????_a1ac*.jpg' es un patrón que coincide con el archivo que está buscando.

mv -t destination "{}" +significa mover archivos coincidentes al destino. Aquí +agrega nuevos archivos coincidentes a los anteriores, como:

mv -t dest a b c d

Aquí abcd son diferentes archivos.

Tu orden

find . -maxdepth 1 -type f | ??????????_a1ac*.jpg |xargs mv -t "/home/ubuntu/ntest"

¡Canaliza la lista de todos los archivos A todos los archivos!

find . -maxdepth 1 -type f -name `*_a1ac*.jpg` -print0 |\
xargs  -0 -r mv -t "/home/ubuntu/ntest"

Hará el truco.

Estas muy cerca. Debe usar la -nameopción para find. Y recuerda citar el patrón.

Entonces

find . -maxdepth 1 -type f -name '??????????_a1ac*.jpg' |xargs mv -t "/home/ubuntu/ntest"

No es tan "bueno" como las findsoluciones, pero otra solución válida es hacer que los mvcomandos sean más granulares.

Esto hace 4096 movimientos, con una menor cantidad de archivos movidos por mvoperación.

FILEPAT=a1ac
for i in $(seq $((0x000)) $((0xfff))); 
do 
   H=$(printf '%x\n' $i)
   mv 1559704165_${FILEPAT}${H}*.jpg /home/ubuntu/ntest
done

Si desea mover archivos en el mismo sistema host, lo que supongo que está haciendo con su mv, rsyncpodría ser una opción más rápida:

rsync -av --inplace -W /source/??????????_a1ac*.jpg /home/ubuntu/ntest/

--inplacey -Westán configurados para acelerar el proceso.

Si esto produce otro error de lista de argumentos demasiado largo, entonces podría alimentar listas arsync

Haga la lista con find, por ejemplo

find . -maxdepth 1 -type f -name '??????????_a1ac*.jpg' > /tmp/my_image_list.txt

y dáselo a rsync

rsync -av --inplace -W --files-from=/tmp/my_image_list.txt /path/to/files /home/ubuntu/ntest/

La fuente aquí es /path/to/files, porque rsynctratará la lista que le dé como relativa a su fuente.

El punto es: rsynces más rápido que mv, si los archivos no están en el mismo sistema de archivos .