Загрузка и анализ iOS Большие ответы JSON вызывают утечку CFData (магазин)

Question

Когда пользователь впервые открывает мое приложение, мне нужно загрузить много данных. Я получаю все эти данные с сервера в форме JSON. В зависимости от пользователя эти файлы JSON могут иметь размер от 10 до 30 Мб каждый, и их может быть более 10.

У меня нет проблем с этим, когда в JSON не более 500 записей, но, как я уже сказал, некоторые из них имеют более 10000 записей и могут иметь размер до 30 МБ.

При загрузке больших файлов JSON мое приложение выделяет тонну памяти до тех пор, пока я не получу предупреждения о памяти и приложение не взорвется.

Кажется, что CFData должен быть NSMutableData, который я строю в didReceiveData. Когда я загружаю один JSON, CFData (хранилище) увеличивается - и когда я начинаю синтаксический анализ, он перестает расти.

Как я могу очистить эти данные, прежде чем перейти к загрузке и анализу следующего JSON?

Как вы можете видеть ниже, в памяти находится 200 МБ CFData (хранилище):

-

Копание в CFData не очень помогает мне:

Вот код, где я создаю операции для получения этих различных JSON:

- (void)checkForUpdates
{
    if(!_globals)
        _globals = [MySingleton sharedInstance];

    MyAFHTTPClient* client = [MyAFHTTPClient sharedClient];
    NSString* path = [NSString stringWithFormat:@"cache?deviceUID=%@&token=%@",[_globals getMacAddress], [_globals getToken]];
    NSURLRequest* request = [client requestWithMethod:@"GET" path:path parameters:nil];

     _currentEnvironment = [_globals getActiveEnvironment];       

    if(!_currentEnvironment.didDownloadDataValue)
        [self setupAndShowHUDinView:self.view withText:@"Checking for updates..."];

    AFJSONRequestOperation* operation = [AFJSONRequestOperation JSONRequestOperationWithRequest:request success:^(NSURLRequest *request, NSHTTPURLResponse *response, id JSON) {

        for(NSString *str in [JSON valueForKey:@"Views"])
        {
            //for each table i need to update, create a request to
            NSString* path = [NSString stringWithFormat:@"cache/%@/?deviceUID=%@&token=%@", str, @"00000-00000-0000-00001", [_globals getToken]];
            NSURLRequest* request = [client requestWithMethod:@"GET" path:path parameters:nil];
            AFJSONRequestOperation* operation2 = [AFJSONRequestOperation JSONRequestOperationWithRequest:request success:^(NSURLRequest *request, NSHTTPURLResponse *response, id JSON) 
            {
                    // even if this is comment this out and I do nothing but download, app crashes
                    //[self updateTable:str withJSON:JSON];
            } failure:nil];

            [operation2 setSuccessCallbackQueue:backgroundQueue];
            [client.operationQueue addOperation:operation2];
            numRequests++;
        }
    } failure:^(NSURLRequest *request, NSHTTPURLResponse *response, NSError *error, id JSON) {

    }];

    [operation start];
}

Это CFData мои ответы JSON, которые находятся в памяти? Я безуспешно пытался очистить NSURLCache.

Я также немного посмотрел на потоковую передачу JSON. Поможет ли это мне вообще уменьшить количество объектов в памяти?

Кроме того, единственная другая опция, о которой я могу подумать, - это реализовать какой-то пейджинг, но мне нужно, чтобы у моих пользователей были все данные.

Любая помощь / предложения с благодарностью! Спасибо!

-

РЕДАКТИРОВАТЬ

Хорошо, я решил использовать раздевание AFNetworking и попытаться использовать нативные функции. При этом я все еще получаю ту же сборку CFData. Я использую этот подкласс NSOperation и создаю / добавляю свои операции следующим образом:

 NSOperationQueue *operationQueue;
 operationQueue = [[NSOperationQueue alloc]init];
 [operationQueue setMaxConcurrentOperationCount:1];
 for(NSString *str in [views valueForKey:@"Views"])
 {

     NSString* path = [NSString stringWithFormat:@"%@cache/%@/?deviceUID=%@&token=%@", _globals.baseURL, str, @"00000-00000-0000-00001", [_globals getToken]];

     LibSyncOperation *libSyncOperation = [[LibSyncOperation alloc] initWithURL:path];
     [operationQueue addOperation:libSyncOperation];

 }

Answer 1

Я использую встроенные функции преобразования JSON с большими объемами данных без проблем с памятью.

Я просто использую стандарт NSURLConnection чтобы скачать NSData затем сделайте следующее...

NSData *data = [NSURLConnection sendSynchronous...

// use NSDictionary or NSArray here
NSArray *array = [NSJSONSerialization JSONObjectWithData:data ...

Now deal with the objects.

Нет утечек, так как это нативная функция. Гораздо быстрее, чем третьи части фреймворков.