Czy metoda readline w Pythonie rozpoznaje obie odmiany linii?

Question

Piszę plik Pythona, który musi zostać odczytany w kilku plikach różnych typów. Czytam pliki w linii po linii z tradycyjnym for line in f po użyciu f = open("file.txt", "r").

Wygląda na to, że nie działa dla wszystkich plików. Domyślam się, że niektóre pliki kończą się różnymi kodowaniami (takimi jak \ r \ n versus \ r). Mogę przeczytać cały plik i zrobić ciąg podzielony na \ r, ale to jest bardzo kosztowne i wolałbym nie. Czy istnieje sposób, aby metoda readline w Pythonie rozpoznała oba warianty końca linii?

Answer 1

pomocą powszechnego poparcia nowej linii - patrz http://docs.python.org/library/functions.html#open

Ponadto średnia fopen() tryb wartości mogą być 'U' lub 'rU'. Python jest zwykle zbudowany z uniwersalną obsługą znaków nowej linii ; dostarczanie "U" otwiera plik w postaci pliku tekstowego, ale linie mogą być zakończone przez jedną z następujących wartości: Konwencja końca linii "Konwencja Unix" \ n ', Konwencja Macintosh' \ r 'lub Konwencja Windows '\ r \ n'. Wszystkie te reprezentacje zewnętrzne są postrzegane jako "\ n" przez program Python. Jeśli Python jest zbudowany bez obsługi uniwersalnej newline, tryb z "U" to to samo, co zwykły tryb tekstowy. Zauważ, że tak otwarte obiekty plików mają atrybut o nazwie newlines, który ma wartość Brak (jeśli nie było jeszcze żadnych nowych linii, ), '\ n', '\ r', '\ r \ n' lub krotka zawierająca wszystkie typy nowej linii.

Answer 2

Można spróbować użyć podejście generator czytać wiersze przez siebie i ignorować wszelkie znaki EOL:

def readlines(f): 
    line = [] 
    while True: 
     s = f.read(1) 
     if len(s) == 0: 
      if len(line) > 0: 
       yield line 
      return 
     if s in ('\r','\n'): 
      if len(line) > 0: 
       yield line 
      line = [] 
     else: 
      line.append(s) 

for line in readlines(yourfile): 
    # ...