【问题标题】:Objective-C, NSTask Buffer LimitationObjective-C,NSTask 缓冲区限制
【发布时间】:2019-03-21 06:45:00
【问题描述】:

我正在使用NSTask 运行一个返回一长串数据的外部实用程序。问题是,当返回的字符串超过大量数据(大约 32759 个字符)时,它会变成null 或截断返回的字符串。如何返回完整的输出?

NSTask *myTask = [[NSTask alloc] init];

[myTask setLaunchPath:myExternalCommand];
[myTask setArguments:[NSArray arrayWithObjects: arg1, arg2, nil]];

NSPipe *pipe = [NSPipe pipe];
[myTask setStandardOutput:pipe];

NSFileHandle *taskHandle;
taskHandle = [pipe fileHandleForReading];

[myTask launch];
[myTask waitUntilExit];

NSData *taskData;
taskData = [taskHandle readDataToEndOfFile];

NSString *outputString = [[NSString alloc] initWithData:taskData
                         encoding:NSUTF8StringEncoding];

NSLog(@"Output: \n%@", outputString);
// (null or truncated) when stdout exceeds x amount of stdout

要测试功能,请在 myExternalCommand 的大文件上使用 cat 或类似名称。这个问题似乎发生在 32759 字符长度之后...

解决方案?我不确定,但可能需要以某种方式读取返回的 stdout 块,然后在可能的情况下附加 outputString 数据。

更新:我尝试根据建议在readDataToEndOfFile 之后移动waitUntilExit,但这并不影响结果。

*请注意,我正在寻找Obj-C 解决方案,谢谢。

【问题讨论】:

  • 在等待任务退出前读取数据。
  • @KenThomases:嗨,Ken,你的意思是把[myTask waitUntilExit]; 放在当前函数的末尾?谢谢!
  • 嗯,应该是在致电-readDataToEndOfFile 之后。如果可行,我会写一个完整的答案,并解释发生了什么。
  • 嗨,Ken,很遗憾,结果并没有改变。我认为需要以某种方式允许 NSTask 读取 stdout 的块并附加数据,尽管我不确定如何或是否可能。
  • 您是否尝试过记录taskData 而不是您尝试从中创建的字符串?我猜你已经掌握了这一切,但它不是有效的 UTF-8 数据,因此尝试从中创建字符串失败。

标签: ios objective-c xcode macos nstask


【解决方案1】:

发现于CocoaDev:

“通过管道的数据被缓冲;缓冲区的大小由底层操作系统决定。”

来自:http://developer.apple.com/documentation/Cocoa/Reference/Foundation/Classes/NSPipe_Class/index.html

NSPipe 缓冲区限制似乎是 4096 字节(参见 /usr/include/limits.h:“... #define _POSIX_ARG_MAX 4096 ...”)

您可以使用readabilityHandler 异步读取NSTask 的输出。在处理程序中,使用availableData 逐段读取输出。

使用terminationHandler 在任务退出后获得通知,然后将readabilityHandler 设置为 nil 以阻止其读取。

都是异步的,所以你需要阻塞并等待任务退出。

这是一个对我来说足够好用的完整示例。我使用了printf 而不是NSLog,因为NSLog 似乎正在截断控制台上的输出(不确定这是否是bug or a feature)。错误检查被省略并增加了一些复杂性,您可能还想以同样的方式阅读standardError。

dispatch_semaphore_t waitHandle;
NSTask *myTask;
NSMutableData* taskOutput;
        
waitHandle = dispatch_semaphore_create(0);
        
myTask = [[NSTask alloc] init];
[myTask setLaunchPath:@"/bin/cat"];
[myTask setArguments:[NSArray arrayWithObjects: @"/path/to/a/big/file", nil]];
[myTask setStandardOutput:[NSPipe pipe]];
        
taskOutput = [[NSMutableData alloc] init];
        
[[myTask.standardOutput fileHandleForReading] setReadabilityHandler:^(NSFileHandle *file) {
    NSData *data = [file availableData];
    [taskOutput appendData:data];
}];
        
[myTask setTerminationHandler:^(NSTask *task) {
    [task.standardOutput fileHandleForReading].readabilityHandler = nil;
            
    NSString *outputString = [[NSString alloc] initWithData:taskOutput encoding:NSUTF8StringEncoding];
    printf("Output: \n%s\n", [outputString UTF8String]);
            
    dispatch_semaphore_signal(waitHandle);
}];
        
[myTask launch];
        
dispatch_semaphore_wait(waitHandle, DISPATCH_TIME_FOREVER);

【讨论】:

  • 查看这个答案:stackoverflow.com/a/40283623/233944。从 macOS 10.12 / iOS 10 开始,NSLog 委托新的统一日志记录,将消息限制为 1024 个字符。超过这个时间,Apple 认为你应该使用自己的日志系统。
  • 您好,感谢您的回答。如果我使用printf,我的原始方法似乎也有效,因此NSLog 限制似乎是主要问题之一。当二进制数据> 4096 时,我也得到了(null),所以我需要测试你的代码,看看是否能完全解决问题。你知道为什么 NSLog 有它的限制吗? - 日志功能不会记录(所有内容)似乎很奇怪。
  • 抱歉,我不小心删除了最后一条评论,但又复制/粘贴了一遍。您知道是否可以几乎连续地将标准输出流式传输到NSTask 管道?只是好奇,因为这也可能有用。
  • 只要有要阅读的内容,就会调用 readabilityHandler;我认为它与您所要求的一样接近连续流。
  • 从我所做的快速测试来看,您的示例似乎效率更高。似乎使用较少的cpu和内存消耗,谢谢,非常感谢。
【解决方案2】:

我有一个任务立即抛出一个大错误并导致挂起,将阅读器添加到 stderr 解决了这个问题

[[myTask.standardError fileHandleForReading] setReadabilityHandler:^(NSFileHandle *file) {
    NSData *data = [file availableData];
    [taskError appendData:data];
}];

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2014-09-11
    • 2016-12-30
    • 2022-11-11
    • 1970-01-01
    相关资源
    最近更新 更多