new - ¿Hay alguna manera en Matlab para determinar el número de líneas en un archivo sin pasar por cada línea?

new line title matlab

Question

Obviamente, uno podría recorrer un archivo usando fgetl o una función similar e incrementar un contador, pero ¿hay alguna manera de determinar el número de líneas en un archivo sin hacer un bucle?

Answer 1

Creo que un bucle es de hecho el mejor, todas las demás opciones hasta ahora sugerían confiar en programas externos (necesitan verificar errores, necesitan str2num, son más difíciles de depurar / ejecutar multiplataforma, etc.) o leen todo el archivo de una vez . Los bucles no son tan malos. Aquí está mi variante

function count = countLines(fname)
  fh = fopen(fname, ''rt'');
  assert(fh ~= -1, ''Could not read: %s'', fname);
  x = onCleanup(@() fclose(fh));
  count = 0;
  while ischar(fgetl(fh))
    count = count + 1;
  end
end

EDITAR: Jonas señala correctamente que el ciclo anterior es muy lento. Aquí hay una versión más rápida.

function count = countLines(fname)
fh = fopen(fname, ''rt'');
assert(fh ~= -1, ''Could not read: %s'', fname);
x = onCleanup(@() fclose(fh));
count = 0;
while ~feof(fh)
    count = count + sum( fread( fh, 16384, ''char'' ) == char(10) );
end
end

Todavía no es tan rápido como wc -l , pero tampoco es un desastre.

Answer 2

Encontré un buen truco here :

if (isunix) %# Linux, mac
    [status, result] = system( [''wc -l '', ''your_file''] );
    numlines = str2num(result);

elseif (ispc) %# Windows
    numlines = str2num( perl(''countlines.pl'', ''your_file'') );

else
    error(''...'');

end

donde ''countlines.pl'' es una secuencia de comandos perl, que contiene

while (<>) {};
print $.,"/n";

Answer 3

Me gusta usar el siguiente código para exactamente esta tarea

fid = fopen(''someTextFile.txt'', ''rb'');
%# Get file size.
fseek(fid, 0, ''eof'');
fileSize = ftell(fid);
frewind(fid);
%# Read the whole file.
data = fread(fid, fileSize, ''uint8'');
%# Count number of line-feeds and increase by one.
numLines = sum(data == 10) + 1;
fclose(fid);

Es bastante rápido si tiene suficiente memoria para leer todo el archivo a la vez. Debería funcionar para finales de línea de estilo Windows y Linux.

Editar: Medí el rendimiento de las respuestas proporcionadas hasta el momento. Aquí está el resultado para determinar el número de líneas de un archivo de texto que contiene 1 millón de valores dobles (un valor por línea). Promedio de 10 intentos.

 Author           Mean time +- standard deviation (s)
------------------------------------------------------
 Rody Oldenhuis      0.3189 +- 0.0314
 Edric (2)           0.3282 +- 0.0248
 Mehrwolf            0.4075 +- 0.0178
 Jonas               1.0813 +- 0.0665
 Edric (1)          26.8825 +- 0.6790

Los más rápidos son los enfoques que usan Perl y la lectura de todo el archivo como datos binarios. No me sorprendería si Perl internamente también leyera grandes bloques del archivo a la vez en lugar de recorrerlo línea por línea (solo una suposición, no sé nada sobre Perl).

Usar un simple fgetl() -loop es por un factor de 25-75 más lento que los otros enfoques.

Editar 2: incluyó el segundo enfoque de Edric, que es mucho más rápido y a la par con la solución de Perl, diría yo.

Answer 4

Puede leer el archivo completo a la vez y luego contar cuántas líneas ha leído.

fid = fopen(''yourFile.ext'');

allText = textscan(fid,''%s'',''delimiter'',''/n'');

numberOfLines = length(allText{1});

fclose(fid)

Answer 5

Yo recomendaría usar una herramienta externa para esto. Por ejemplo, una aplicación llamada cloc , que puedes descargar here gratis.

En Linux, simplemente escriba cloc <repository path> y obtenga

YourPC$ cloc <directory_path>
      87 text files.
      81 unique files.                              
      23 files ignored.

http://cloc.sourceforge.net v 1.60  T=0.19 s (311.7 files/s, 51946.9 lines/s)
-------------------------------------------------------------------------------
Language                     files          blank        comment           code
-------------------------------------------------------------------------------
MATLAB                          59           1009           1074           4993
HTML                             1              0              0             23
-------------------------------------------------------------------------------
SUM:                            60           1009           1074           5016
-------------------------------------------------------------------------------

También afirman que debería funcionar en Windows.