Jak zamienić zakończenia linii w VIM

Question

Jak wymienić wszystkie zakończenia linii w dużym pliku (> 100 MB)? Próbowałem zrobić

:%s/\n/, /g

ale jest zbyt powolny.

Answer 1

Więc ja przeszedłem i testowanego/w czasie niektóre z odpowiedzi, które zostały podane przez innych ludzi, plus własną odpowiedź python. Oto co mam:

tr:

> time tr "\n" "," <lines> line 
real 0m1.617s 
user 0m0.100s 
sys  0m1.520s 

python:

> time python -c 'import sys; print sys.stdin.read().replace("\n",", "),' <lines> line 
real 0m1.663s 
user 0m0.060s 
sys  0m1.610s 

awk:

> time awk '{printf("%s, ", $0)}' lines > line         
real 0m1.998s 
user 0m0.390s 
sys  0m1.600s 

Perl:

> time perl -e 'while (<>) { chomp; print "$_, " }' lines > line 
real 0m2.100s 
user 0m0.590s 
sys  0m1.510s 

sed:

> time sed 's/$/, /g' lines > line            
real 0m6.673s 
user 0m5.050s 
sys  0m1.630s 

Oto plik użyłem:

> ls -lh lines 
-rw-r--r-- 1 some one 101M 2010-03-04 19:54 lines 
> wc -l < lines 
1300000 
> head -n 3 < lines 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
> head -n 1 < lines | wc -c 
82 

pierwotnie taktowania zostały podjęte w Cygwin, że zostały już podjęte całkowicie zaktualizowany ubuntu 9.10. Rozmiar plików tekstowych został zwiększony do 100 megabajtów, z liniami o szerokości 80 znaków. Jak widać, prawie wszystko inne niż sed to dobry pomysł.

Answer 2

Ten skrypt Perla służy do przeglądania pliku; byłoby szybsze niż przechowywanie wszystkiego w pamięci za pomocą VIM. Po prostu wyprowadź wyjście do nowego pliku.

#!/usr/local/bin/perl 

while (<>) { 
    $_ =~ s/\n/,/g; 
    print $_; 
} 

Answer 3

Czy musisz to zrobić w vim?

Jest miły narzędzie Unix że robi tłumaczenie oparte znaków. Nazwano go tr. Niektóre reference.

W twoim przypadku będzie to:

 
tr "\n" "," < input_file > output_file 

Answer 4

:%s/$/, / następnie :1,$j może być szybciej. W przeciwnym razie wykonaj to w narzędziu zewnętrznym:

perl -e 'while (<>) { chomp; print "$_, " }' input_file > output_file 

awk '{printf("%s, ", $0)}' input_file > output_file 

Nie wiem z góry mojej głowy, która byłaby najszybsza.

Answer 5

$ more file 
aaaa 
bbbb 
cccc 
dddd 
eeee 

$ awk 'NR>1{printf("%s, ", p)}{p=$0}END{print p}' file 
aaaa, bbbb, cccc, dddd, eeee 

$ sed -e :b -e '$!N;s/\n/, /;tb' file 

Answer 6

Najlepsze narzędzie to sed i można go używać z:! Komenda

więc używać :!sed -e 's/\n/,/g' % > %.tmp ; cat %.tmp > % ; rm %.tmp'

Musisz utworzyć plik tmp ze zmianami przed zintegrować w bieżącym pliku