Meine Datei ist "xml.txt" mit folgendem Inhalt:
books.xml
news.xml
mix.xml
wenn ich die Funktion readline () verwende, wird an den Namen aller Dateien "\ n" angehängt. Dies ist ein Fehler, da ich die in der xml.txt enthaltenen Dateien öffnen möchte. Ich habe das geschrieben:
fo = open("xml.tx","r")
for i in range(count.__len__()): #here count is one of may arrays that i'm using
file = fo.readline()
find_root(file) # here find_root is my own created function not displayed here
fehler beim Ausführen dieses Codes:
IOError: [Errno 2] No such file or directory: 'books.xml\n'
Um nur die Newline am Ende zu entfernen:
line = line.rstrip('\n')
Der Grund readline
behält das Newline-Zeichen, damit Sie zwischen einer leeren Zeile (mit der Newline) und dem Ende der Datei (leere Zeichenfolge) unterscheiden können.
lines = open(filename).read().splitlines()
Sie können die .rstrip()
-Methode von String-Objekten verwenden, um eine Version mit nachgestellten Leerzeichen (einschließlich Zeilenumbrüchen) zu erhalten.
Z.B.:
find_root(file.rstrip())
Um das Newline-Zeichen vom Ende zu entfernen, können Sie auch Folgendes verwenden:
for line in file:
print line[:-1]
Ich habe es nur aus Neugier festgelegt. Unten finden Sie die Ergebnisse für eine unterschiedlich große Datei.
tldr; Das Lesen von Dateien und das Aufteilen scheinen der schnellste Ansatz für eine große Datei zu sein.
with open(FILENAME, "r") as file:
lines = file.read().split("\n")
Wenn Sie die Zeilen trotzdem durchlaufen müssen, möchten Sie wahrscheinlich:
with open(FILENAME, "r") as file:
for line in file:
line = line.rstrip("\n")
Python 3.4.2
import timeit
FILENAME = "mylargefile.csv"
DELIMITER = "\n"
def splitlines_read():
"""Read the file then split the lines from the splitlines builtin method.
Returns:
lines (list): List of file lines.
"""
with open(FILENAME, "r") as file:
lines = file.read().splitlines()
return lines
# end splitlines_read
def split_read():
"""Read the file then split the lines.
This method will return empty strings for blank lines (Same as the other methods).
This method may also have an extra additional element as an empty string (compared to
splitlines_read).
Returns:
lines (list): List of file lines.
"""
with open(FILENAME, "r") as file:
lines = file.read().split(DELIMITER)
return lines
# end split_read
def strip_read():
"""Loop through the file and create a new list of lines and removes any "\n" by rstrip
Returns:
lines (list): List of file lines.
"""
with open(FILENAME, "r") as file:
lines = [line.rstrip(DELIMITER) for line in file]
return lines
# end strip_readline
def strip_readlines():
"""Loop through the file's read lines and create a new list of lines and removes any "\n" by
rstrip. ... will probably be slower than the strip_read, but might as well test everything.
Returns:
lines (list): List of file lines.
"""
with open(FILENAME, "r") as file:
lines = [line.rstrip(DELIMITER) for line in file.readlines()]
return lines
# end strip_readline
def compare_times():
run = 100
splitlines_t = timeit.timeit(splitlines_read, number=run)
print("Splitlines Read:", splitlines_t)
split_t = timeit.timeit(split_read, number=run)
print("Split Read:", split_t)
strip_t = timeit.timeit(strip_read, number=run)
print("Strip Read:", strip_t)
striplines_t = timeit.timeit(strip_readlines, number=run)
print("Strip Readlines:", striplines_t)
# end compare_times
def compare_values():
"""Compare the values of the file.
Note: split_read fails, because has an extra empty string in the list of lines. That's the only
reason why it fails.
"""
splr = splitlines_read()
sprl = split_read()
strr = strip_read()
strl = strip_readlines()
print("splitlines_read")
print(repr(splr[:10]))
print("split_read", splr == sprl)
print(repr(sprl[:10]))
print("strip_read", splr == strr)
print(repr(strr[:10]))
print("strip_readline", splr == strl)
print(repr(strl[:10]))
# end compare_values
if __== "__main__":
compare_values()
compare_times()
Ergebnisse:
run = 1000
Splitlines Read: 201.02846901328783
Split Read: 137.51448011841822
Strip Read: 156.18040391519133
Strip Readline: 172.12281272950372
run = 100
Splitlines Read: 19.956802833188124
Split Read: 13.657361738959867
Strip Read: 15.731161020969516
Strip Readlines: 17.434831199281092
run = 100
Splitlines Read: 20.01516321280158
Split Read: 13.786344555543899
Strip Read: 16.02410587620824
Strip Readlines: 17.09326775703279
Das Lesen von Dateien und das Aufteilen scheinen der schnellste Weg für eine große Datei zu sein.
Hinweis: Wenn Sie dann lesen ("\ n") teilen, wird am Ende der Liste eine zusätzliche leere Zeichenfolge angezeigt.
Hinweis: read then splitlines () prüft auf mehr als "\ n", möglicherweise "\ r\n".
Ein Anwendungsfall mit der Antwort von @Lars Wirzenius:
with open("list.txt", "r") as myfile:
for lines in myfile:
lines = lines.rstrip('\n') # the trick
try:
with open(lines) as myFile:
print "ok"
except IOError as e:
print "files does not exist"
Es ist besser, einen Kontextmanager für die Datei zu verwenden, und len()
, anstatt .__len__()
aufzurufen.
with open("xml.tx","r") as fo:
for i in range(len(count)): #here count is one of may arrays that i'm using
file = next(fo).rstrip("\n")
find_root(file) # here find_root is my own created function not displayed here
# mode : 'r', 'w', 'a'
f = open("ur_filename", "mode")
for t in f:
if(t):
fn.write(t.rstrip("\n"))
Die If-Bedingung prüft, ob die Zeile eine Zeichenfolge enthält oder nicht. Wenn ja, wird in der nächsten Zeile das "\ n" am Ende entfernt und in eine Datei geschrieben. Code Tested. ;)