Разбор большого XML с сервера при загрузке с LibXML2 в Swift 3
У меня проблема с парсером SAX из LibXML2 в Swift 3.
Я хочу что-то вроде XMLPullParser с Android в iOS. Который загружает XML с сервера и во время загрузки анализирует поток.
Мой XML выглядит так:
<?xml version="1.0" encoding="UTF-8" ?>
<ResultList id="12345678-0" platforms="A;B;C;D;E">
<Book id="1111111111" author="Author A" title="Title A" price="9.95" ... />
<Book id="1111111112" author="Author B" title="Title B" price="2.00" ... />
<Book id="1111111113" author="Author C" title="Title C" price="5.00" ... />
<ResultInfo bookcount="3" />
</ResultList>
Таким образом, все данные хранятся в атрибутах, а не в дочерних узлах.
Я сам создал следующий класс на основе этих примеров:
XMLPerformance, XMLPerformance-Swift и iOS-XML-Streaming
import Foundation
class LibXMLParser: NSObject, URLSessionDataDelegate {
var url: URL?
var delegate: LibXMLParserDelegate?
var done = false
var context: xmlParserCtxtPtr?
var simpleSAXHandlerStruct: xmlSAXHandler = {
var handler = xmlSAXHandler()
handler.initialized = XML_SAX2_MAGIC
handler.startElementNs = startElementSAX
handler.endElementNs = endElementSAX
handler.characters = charactersFoundSAX
//handler.error = errorEncounteredSAX
return handler
}()
init(url: URL) {
super.init()
self.url = url
}
func parse() {
self.done = false
let session = URLSession(configuration: .default, delegate: self, delegateQueue: OperationQueue.main)
let dataTask = session.dataTask(with: URLRequest(url: url!))
dataTask.resume()
self.context = xmlCreatePushParserCtxt(&simpleSAXHandlerStruct, Unmanaged.passUnretained(self).toOpaque(), nil, 0, nil)
self.delegate?.parserDidStartDocument()
repeat {
RunLoop.current.run(mode: .defaultRunLoopMode, before: Date.distantFuture)
} while !self.done
xmlFreeParserCtxt(self.context)
self.delegate?.parserDidEndDocument()
}
func urlSession(_ session: URLSession, dataTask: URLSessionDataTask, didReceive data: Data) {
print("Did receive data")
data.withUnsafeBytes { (bytes: UnsafePointer<CChar>) -> Void in
xmlParseChunk(self.context, bytes, CInt(data.count), 0)
}
}
func urlSessionDidFinishEvents(forBackgroundURLSession session: URLSession) {
xmlParseChunk(self.context, nil, 0, 1)
self.done = true
}
func urlSession(_ session: URLSession, didBecomeInvalidWithError error: Error?) {
self.done = true
//self.delegate?.parserErrorOccurred(error)
}
func urlSession(_ session: URLSession, task: URLSessionTask, didCompleteWithError error: Error?) {
self.done = true
//self.delegate?.parserErrorOccurred(error)
}
}
private func startElementSAX(_ ctx: UnsafeMutableRawPointer?, name: UnsafePointer<xmlChar>?, prefix: UnsafePointer<xmlChar>?, URI: UnsafePointer<xmlChar>?, nb_namespaces: CInt, namespaces: UnsafeMutablePointer<UnsafePointer<xmlChar>?>?, nb_attributes: CInt, nb_defaulted: CInt, attributes: UnsafeMutablePointer<UnsafePointer<xmlChar>?>?) {
let parser = Unmanaged<LibXMLParser>.fromOpaque(ctx!).takeUnretainedValue()
parser.delegate?.parserDidStartElement(String(cString: name!), nb_attributes: nb_attributes, attributes: attributes)
}
private func endElementSAX(_ ctx: UnsafeMutableRawPointer?, name: UnsafePointer<xmlChar>?,
prefix: UnsafePointer<xmlChar>?,
URI: UnsafePointer<xmlChar>?) {
let parser = Unmanaged<LibXMLParser>.fromOpaque(ctx!).takeUnretainedValue()
parser.delegate?.parserDidEndElement(String(cString: name!))
}
private func charactersFoundSAX(_ ctx: UnsafeMutableRawPointer?, ch: UnsafePointer<xmlChar>?, len: CInt) {
let parser = Unmanaged<LibXMLParser>.fromOpaque(ctx!).takeUnretainedValue()
parser.delegate?.parserFoundCharacters(String(cString: ch!))
}
Я инициализирую этот класс с URL, Когда я звоню parse() это создает URLSession и URLSessionDataTask с делегатом к себе, чтобы переопределить метод didReceive data: Data, После этого я создаю xmlParserCtxtPtr и цикл до завершения задачи DataTask.
Когда он получает данные, я анализирую его xmlParseChunk метод и startElementSAX вызывает делегат, который я установил из класса ViewController. (Мне просто нужно имя элемента, количество атрибутов и атрибутов.)
Все идет нормально.
В моем ViewController (UITableViewController) у меня есть следующий код:
func downloadBooksLibXML() {
print("Downloading…")
UIApplication.shared.isNetworkActivityIndicatorVisible = true
DispatchQueue.global().async {
print("Setting up parser")
let parser = LibXMLParser(url: URL(string: self.baseUrl + self.parameters!)!)
parser.delegate = self
parser.parse()
}
}
func parserDidStartDocument() {
}
func parserDidEndDocument() {
DispatchQueue.main.sync {
UIApplication.shared.isNetworkActivityIndicatorVisible = false
self.isDone = true
print("Finished")
}
}
func parserDidStartElement(_ elementName: String, nb_attributes: CInt, attributes: UnsafeMutablePointer<UnsafePointer<xmlChar>?>?) {
print(elementName)
switch elementName {
case "Book":
DispatchQueue.main.async {
let book = self.buildBook(nb_attributes: nb_attributes, attributes: attributes)
self.books.append(book)
self.tableView.beginUpdates()
self.tableView.insertRows(at: [IndexPath(row: self.books.count - 1, section: 0)], with: .automatic)
self.tableView.endUpdates()
self.navigationItem.title = String(format: NSLocalizedString("books_found", comment: "Books found"), "\(self.books.count)")
}
case "ResultList":
break
case "ResultInfo":
break
default:
break
}
}
func buildBook(nb_attributes: CInt, attributes: UnsafeMutablePointer<UnsafePointer<xmlChar>?>?) -> Book {
let fields = 5 /* (localname/prefix/URI/value/end) */
let book = Book()
for i in 0..<Int(nb_attributes) {
if let localname = attributes?[i * fields + 0],
//let prefix = attributes?[i * fields + 1],
//let URI = attributes?[i * fields + 2],
let value_start = attributes?[i * fields + 3],
let value_end = attributes?[i * fields + 4] {
let localnameString = String(cString: localname)
let string_start = String(cString: value_start)
let string_end = String(cString: value_end)
let diff = string_start.characters.count - string_end.characters.count
if diff > 0 {
let value = string_start.substring(to: string_start.index(string_start.startIndex, offsetBy: diff))
book.setValue(value, forKey: localnameString)
}
}
}
return book
}
func parserDidEndElement(_ elementName: String) {
}
func parserFoundCharacters(_ string: String) {
}
func parserErrorOccurred(_ parseError: Error?) {
}
------
Обновить
Таким образом, проблема с получением значений атрибута была решена с помощью ответа от nwellnhof. Я обновил свой код выше, чтобы он стал намного лучше. Теперь он не перебирает все атрибуты. Теперь моя новая проблема:
Я создал метод buildBook чтобы получить Book объект атрибутов XML. Я в основном перевел этот метод отсюда. Как правильно получить значение атрибута в синтаксическом анализаторе libxML (C++)? Свифт и использовал setValue(value: Any?, forKey: String) установить атрибуты моего объекта книги.
Но теперь моя проблема в том, что он не обновляет tableView. Я пытался выполнить buildBook синхронный метод в фоновом потоке, используя DispatchQueue.global().sync и обновление tableView в асинхронном основном потоке, используя DispatchQueue.main.async, Но тогда он падает на tableView.endUpdates() хотя это в основной ветке.
------
Любая помощь будет высоко оценен.
1 ответ
Похоже на простую ошибку. Чтобы перебрать массив атрибутов в C, я бы написал что-то вроде:
for (int i = 0; i < nb_attributes; i++)
Но вы используете оператор закрытого диапазона, который включает верхнюю границу:
for i in 0...Int(nb_attributes)
Так что вместо этого вы должны использовать оператор полуоткрытого диапазона:
for i in 0..<Int(nb_attributes)
Кстати, libxml2 также имеет интерфейс парсера по запросу, смоделированный после C# XmlTextReader который намного проще в использовании, чем парсер SAX.