Necesito ejecutar pruebas de rendimiento para mi programa concurrente y mi requisito es que se ejecute en un solo núcleo de CPU. (No quiero hilos cooperativos; quiero tener siempre un cambio de contexto). Entonces tengo dos preguntas: La mejor solución: cómo firmar y reservar solo un núcleo de...
He escrito un script bash que está en el siguiente formato: #!/bin/bash start=$(date +%s) inFile="input.txt" outFile="output.csv" rm -f $inFile $outFile while read line do -- Block of Commands done < "$inFile" end=$(date +%s) runtime=$((end-start)) echo "Program has finished execution...
Estoy usando xargspara llamar a un script de Python para procesar unos 30 millones de archivos pequeños. Espero usar xargspara paralelizar el proceso. El comando que estoy usando es: find ./data -name "*.json" -print0 | xargs -0 -I{} -P 40 python Convert.py {} > log.txt Básicamente,...
Quiero paralelizar los forbucles del siguiente código. ¿Como hacer esto? #!/bin/bash N=$1 n=$2 for (( i=1; i<=$N; i++ )); do min=100000000000000 //set min to some garbage value for (( j=1; j<=$n; j++ )); do val=$(/path/to/a.out) val2=`echo $val | bc` if (( $val2 < $min )); then...
Me gustaría usar la función de GNU paralelo donde puede ejecutar el comando y la lista que se alimenta en paralelo y escupirlo después de que todo esté hecho, sin embargo, no quiero instalar GNU paralelo en todos nuestros servidores. O tal vez una versión paralela de xargs? ¿Existe una...
Tengo un proceso embarazosamente paralelo que crea una gran cantidad de archivos casi (pero no completamente) idénticos. ¿Hay alguna manera de archivar los archivos "sobre la marcha", para que los datos no consuman más espacio del necesario? El proceso en sí mismo acepta parámetros de línea de...
Digamos que tengo varios scripts de bash que se ejecutan en paralelo, con un código como el siguiente: #!/bin/bash tail -f /dev/null & echo "pid is "$! ¿Se $!garantiza que me dará el PID de la tarea en segundo plano más reciente en ese script , o es la tarea en segundo plano más reciente a...
¿Es esta la forma correcta de iniciar múltiples procesamientos secuenciales en segundo plano? for i in {1..10}; do for j in {1..10}; do run_command $i $j; done & done; Todos jdeben procesarse uno tras otro para un determinado i, pero todos ideben procesarse