Soy curioso.
Puedes usar less Para leer un archivo de 100 GB sin problemas.
Pero si tu cat un archivo de 100 GB en lessEstoy pensando que less debe almacenar el archivo completo en búfer porque hay un conducto (¿era 64K?) entre el archivo y menos.
Entonces, cualquiera que sepa sobre la política de almacenamiento less, ¿comenzará el almacenamiento en búfer desde el principio hasta que se agote la memoria?
La página de manual de less cubre el tema:
-bn or --buffers=n
Specifies the amount of buffer space less will use for each file,
in units of kilobytes (1024 bytes). By default 64K of buffer space
is used for each file (unless the file is a pipe; see the -B
option). The -b option specifies instead that n kilobytes of buf‐
fer space should be used for each file. If n is -1, buffer space
is unlimited; that is, the entire file can be read into memory.
-B or --auto-buffers
By default, when data is read from a pipe, buffers are allocated
automatically as needed. If a large amount of data is read from
the pipe, this can cause a large amount of memory to be allocated.
The -B option disables this automatic allocation of buffers for
pipes, so that only 64K (or the amount of space specified by the -b
option) is used for the pipe. Warning: use of -B can result in
erroneous display, since only the most recently viewed part of the
piped data is kept in memory; any earlier data is lost.
La página de manual implica que el búfer eventualmente crecerá tan grande como toda la entrada, si no lo restringe por las opciones -B y -b.