[pyar] CSV enorme con pandas

Javier Marcon javiermarcon en gmail.com
Sab Oct 3 16:31:15 ART 2015


El 02/10/15 a las 20:11, Jairo Trad escribió:
> Estimados, llego a mis manos un csv que pesa 4GB y tienen un par de
> millones de filas, así que cuando trato de cargarlo con Pandas me
> explota todo. 
>
> Como es la metodología que se usa cuando pasa esto?
>
> Del csv solo necesito 2 columnas, asi que capaz se puede optimizar por
> ese lado.
>
> Saludos, Jairo
Para mi tendrias que usar un iterator como se explica en
http://stackoverflow.com/questions/519633/lazy-method-for-reading-big-file-in-python


More information about the pyar mailing list