大容量XML解析

2011-07-18 09:52:33 141 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

python 预处理XML格式文档经验总结 XML（the Extensible Markup Language）格式为设计特定领域的标记语言提供了一个框架，它有时被用于表示已被标注的文本和词汇资源，不同于HTML标签是预定义的，XML允许我们组建自己的标签，不同于数据库，XML允许创建的数据不必事先指定其结构，它允许有可选、可重复的元素。 Python的标准库xml.etree.ElementTree可以直接调用来处理XM 阅读详情

<?xml version = '1.0' encoding = 'GBK'?>

<root>

	<record>

			<node1 id = 'id_1' name = 'name_1'/>

			<node2 id = 'id_2' name = 'name_2'/>

			<node3 id = 'id_3' name = 'name_3'/>

			<node4 id = 'id_4' name = 'name_4'/>

	</record>

	<record>

			<node1 id = 'id_1' name = 'name_1'/>

			<node2 id = 'id_2' name = 'name_2'/>

			<node3 id = 'id_3' name = 'name_3'/>

			<node4 id = 'id_4' name = 'name_4'/>

	</record>

	<record>

			<node1 id = 'id_1' name = 'name_1'/>

			<node2 id = 'id_2' name = 'name_2'/>

			<node3 id = 'id_3' name = 'name_3'/>

			<node4 id = 'id_4' name = 'name_4'/>

	</record>

	<record>

			<node1 id = 'id_1' name = 'name_1'/>

			<node2 id = 'id_2' name = 'name_2'/>

			<node3 id = 'id_3' name = 'name_3'/>

			<node4 id = 'id_4' name = 'name_4'/>

	</record>......<root>

各位大侠，最近项目遇到一个XML解析的问题，就是一个大容量的XML文件，可能300M+，XML格式如上代码，要一次加载到内存解析不现实，基本上不可行，现想根据record的个数解析，比如说一次加载100个rocord来解析，然后依次类推这样下去，不知道有没有可行的解决方案，希望各位能给点意见，谢谢！

...全文