对于某些丧心病狂提供了上百兆 XML 文件的 API 要怎么破？

[andybest]

例如： http://www.meituan.com/api/v2/beijing/deals （只是例子，有比这个大很多的）

每次读取服务器妥妥 OutOfMemoryError，除了分配给服务器更多的可用内存（土豪就没这个问题了）
在服务器可用内存低于这个 XML 文件大小时，如何正常处理这个 API ？

[Livid]

没有提供分页参数么？

[izoabr]

@julyclyde 你觉得这个问题怎么办？

[yorkw]

Streaming Versus DOM:

http://docs.oracle.com/cd/E17802_01/webservices/webservices/docs/1.6/tutorial/doc/SJSXP2.html

[tabris17]

自己写一个XMLParser

[keithellis]

SAX parser

[feiyuanqiu]

PHP的话，可以用XMLReader这个扩展，它是按照文件流的方式每次按照节点来读取，读完一个节点再读下一个，不会把文件整个载入内存，php5.1以上都是自带了的，直接可以用。

[andybest]

@keithellis SAX (Simple API for XML) parser 不是在初始化的时候一次将XML全部装入内存的吗？如何能解决这个问题呢？

[chmlai]

@andybest SAX 不需要, DOM 才是

[andybest]

@chmlai 谢谢，SAX 是 streaming 的读取模式吗？

[keithellis]

http://javarevisited.blogspot.jp/2011/12/parse-read-xml-file-java-sax-parser.html
也可以考虑一下Pull Parser

[bigredapple]

SAX

[andybest]

@keithellis Very useful ！收藏了，十分感谢！

[kaneg]

如果你使用Java，基于事件的流式处理方式应该更适合你。示例代码：
try {
URL url = new URL("http://www.meituan.com/api/v2/beijing/deals");
URLConnection connection = url.openConnection();
connection.setConnectTimeout(5000);
connection.setReadTimeout(60000);
InputStream is = connection.getInputStream();
try {
XMLInputFactory factory = XMLInputFactory.newInstance();
XMLEventReader xmlEventReader = factory.createXMLEventReader(new BufferedInputStream(is));
while (xmlEventReader.hasNext()) {
XMLEvent xmlEvent = xmlEventReader.nextEvent();

if (xmlEvent.isStartElement()) {
StartElement startElement = xmlEvent.asStartElement();
System.out.println(startElement.getName().getLocalPart());
}
}
} catch (Exception e) {
System.err.println(e.getMessage());
}
} catch (IOException e) {
System.err.println(e.getMessage());
}

[xujialiang]

IOS中，document方式会一次把xml全部读进内存的。

[Zhang]

加载完了，浏览器耗了4.42GB内存

[andybest]

@Zhang 用什么方式加载的？

[fanghui]

笨方法：下载--保存文件--分文件--解析文件---

[Zhang]

@andybest safari呀

[ChiChou]

@fanghui 分文件就破坏了 XML 的合法性。

[ChiChou]

pull 比较适合这个场景。