Preguntas etiquetadas con parallel-processing

Ejecutar varios comandos (o incluso computadoras) en paralelo para una mayor eficiencia.

30
Rsync en paralelo

Me acabo de mudar y descubrí, después de una prueba y error, que en algún lugar entre mi hogar y mi servidor remoto, hay una aceleración ... pero la aceleración no es muy inteligente. Solo acelera las conexiones individuales. Entonces, si copio un archivo de 1 GB, procederá alegremente a 150 kBps....

12
netcat como un servidor multiproceso

Yo uso netcat para ejecutar un servidor simple como este: while true; do nc -l -p 2468 -e ./my_exe; done De esta manera, cualquiera puede conectarse a mi host en el puerto 2468 y hablar con "my_exe". Desafortunadamente, si alguien más quiere conectarse durante una sesión abierta, obtendría un...

11
Bucles de concha paralela

Quiero procesar muchos archivos y desde que tengo aquí un montón de núcleos, quiero hacerlo en paralelo: for i in *.myfiles; do do_something $i `derived_params $i` other_params; done Sé de una solución Makefile pero mis comandos necesitan los argumentos de la lista global de shell. Lo que...

10
Ordenar --paralelo no está paralelizando

Estoy tratando de hacer un conjunto único de líneas extraídas de un archivo con egrep con sort -u, luego las cuento. Alrededor del 10% de las líneas (todos los 100 caracteres del alfabeto [ATCG]) están duplicados. Hay dos archivos, aproximadamente 3 conciertos cada uno, el 50% no son relevantes,...