[pyar] leyendo archivo en paralelo

Sebastian Bassi sebastian.bassi en globant.com
Vie Ago 8 22:16:43 ART 2014


2014-08-08 19:51 GMT-03:00 Ezequiel Brizuela [aka EHB or qlixed]
<qlixed en gmail.com>:
> Leer 3 partes distintas de un mismo archivo en un mismo disco, segun creo
> yo, es bastante menos eficiente que leerlo de forma serial y repartir el
> procesamiento de cada linea entre varios workers. La I/O serial es mucho mas
> rapida en disco.

Pero cada worker lo lee en forma serial, solo que hay un offset para
no se pisen en lo que se procesa.


More information about the pyar mailing list