试图解析未知编码

Question

我试图解析从以下POST请求的响应的POST响应：

// PERFORM REQUEST 
NSURLSessionDataTask *postDataTask = [session dataTaskWithRequest:request completionHandler:^(NSData *data, NSURLResponse *response, NSError *error) { 

    // GET RESPONSE STRING 
    responseStr = [[NSString alloc] initWithData:data encoding:NSASCIIStringEncoding]; 

    // SIGNAL DONE 
    dispatch_semaphore_signal(sema); 

}]; 

我一直有特殊字符等问题ÀÈÌÒÙ返回错误。有没有一种方法可以确定数据的正确编码？或者用可以正确解释这些字符的东西解码数据？

Answer 1

如果您有变音，NSASCIIStringEncoding绝对是错误的编码，这意味着原来的7位ASCII，将失败与价值的任何字节> 127

没有通用的方法来确定文本编码。根据您要下载的数据的不同，可能存在启发式。例如。如果您知道所有包含国际字符的响应中包含的字符串，则可以将该字节序列与各种编码中的字符序列进行比较。或者有些库包含某些字节序列的频率的统计信息，以检测文本是什么语言和编码，但这些都可能会猜测错误。

你已经在评论中说没有标题指示编码，这将是一个替代解决方案。

除此之外，您只能查看与您通话的任何服务器的规范，并硬编码给定的编码。或者如果没有，请尝试不同的编码，直到一个作品。

这些天最常见的编码是UTF8和Windows拉丁文1.如果直到很久以后才能说出（例如解析JSON响应），我推荐使用编码，其中0 ... 255是有效的（如Windows Latin或非有损ASCII），并在检查数据后，再次进行转换。

Answer 2

我能够通过以下检测数据的编码来解决问题：

// FIND ENCODING 
NSStringEncoding encoding = [NSString stringEncodingForData:chunk encodingOptions:nil convertedString:nil usedLossyConversion:0]; 

为了提高它的准确性我了分割数据成块，并分别解码的每个块。用于执行此操作的代码如下所示：

// PERFORM REQUEST 
NSURLSessionDataTask *postDataTask = [session dataTaskWithRequest:request completionHandler:^(NSData *data, NSURLResponse *response, NSError *error) { 

    // INIT 
    responseStr = @""; 
    NSUInteger length = [data length]; 
    NSUInteger chunkSize = 100; 
    NSUInteger offset = 0; 

    do { 

     // GET CHUNK 
     NSUInteger thisChunkSize = length - offset > chunkSize ? chunkSize : length - offset; 
     NSData* chunk = [NSData dataWithBytesNoCopy:(char *)[data bytes] + offset 
              length:thisChunkSize freeWhenDone:NO]; 

     // SET OFFSET 
     offset += thisChunkSize; 

     // FIND ENCODING 
     NSStringEncoding encoding = [NSString stringEncodingForData:chunk encodingOptions:nil convertedString:nil usedLossyConversion:0]; 

     // GET RESPONSE STRING 
     NSString *chunkString = [[NSString alloc] initWithData:chunk encoding:encoding]; 

     // APPEND TO RESPONSE 
     responseStr = [responseStr stringByAppendingString:chunkString]; 

    } while (offset < length); 

    // SIGNAL DONE 
    dispatch_semaphore_signal(sema); 

}];