[pyar] problemita con zipfile

[Juan BC]

estoy renegando hace algunas horas con zipfile, y la verdad que no se 
bien como solucionar esto:

suponiendo que tengo un archivo zip que adentro tiene el archivo(sic) 
coso.txt

quiero poder escribir en el susodicho coso.txt de la siguiente forma

import zipfile

f = zipfile.ZipFile("archivo.zip", "a")

f.writestr("coso.txt", "mensajito para escribir")

lo que termina sucediendo es que ahora en mi archivo.zip tiene ahora 2 
archivos coso.txt, con el mismo contenido.

Ya probe cambiando de modo a "w" y lo que sucede es que solo me aparece 
el archivo coso.txt y los demas archivos se borran.

Alguna idea de como solucionar esto?