7
Chciałbym parsować ogromny xml (> 200MB) używając lxml.etree
w Pythonie. Próbowałem użyć etree.parse
załadować plik XML, ale to nie działa ze względu na rozmiar pliku:Używanie python lxml.etree do dużych plików XML
etree.parse('file.xml')Traceback (most recent call last):
File "<stdin>", line 1, in <module>
File "lxml.etree.pyx", line 2706, in lxml.etree.parse (src/lxml/lxml.etree.c:49958)
File "parser.pxi", line 1500, in lxml.etree._parseDocument (src/lxml/lxml.etree.c:71797)
File "parser.pxi", line 1529, in lxml.etree._parseDocumentFromURL (src/lxml/lxml.etree.c:72080)
File "parser.pxi", line 1429, in lxml.etree._parseDocFromFile (src/lxml/lxml.etree.c:71175)
File "parser.pxi", line 975, in lxml.etree._BaseParser._parseDocFromFile (src/lxml/lxml.etree.c:68173)
File "parser.pxi", line 539, in lxml.etree._ParserContext._handleParseResultDoc (src/lxml/lxml.etree.c:64257)
File "parser.pxi", line 625, in lxml.etree._handleParseResult (src/lxml/lxml.etree.c:65178)
File "parser.pxi", line 565, in lxml.etree._raiseParseError (src/lxml/lxml.etree.c:64521)
lxml.etree.XMLSyntaxError: Excessive depth in document: 256 use XML_PARSE_HUGE option, line 1276, column 7
jak chcę użyć wyrażeń XPath, muszę przeanalizować najpierw plik. Jak mogę przetworzyć plik XML? Jak korzystać z XML_PARSE_HUGE
w połączeniu z lxml.etree
?
Dzięki!
działa dobrze. Dziękuję Ci. – scdev
Jeśli wystąpi ten błąd: "Python XMLSyntaxError: błąd wewnętrzny: Ogromne wyszukiwanie danych wejściowych" to rozwiązanie działa również! – ospider