leer - python csv writer example

Lectura de csv en pig, archivo csv contiene comas

Question

Entonces mis datos se ven algo como esto

asdf, asdf, "adsf,qwef", asdf

Cuando leo esos datos en el cerdo usando

PigStorage('','')

Almacena el "adsf, qwef" como dos datos, y lo almacena como

{ "adsf } { qwef" }

Quiero que las citas se traten como datos únicos.

¿Que debería hacer?

Estoy tratando de escribir un pigscript para hacer esto.

Answer 1

Debe usar el CSVLoader:

data = LOAD ''my.csv'' USING org.apache.pig.piggybank.storage.CSVExcelStorage()
AS (...);

Donde el ... es los identificadores.

NOTA: Primero deberá registrar Piggybank. Detalles aquí: https://cwiki.apache.org/confluence/display/PIG/PiggyBank