pthread_create() 在 291 循环时因 EAGAIN 失败

Question

我有这个代码：

int main(int argc, char** argv)
{
  pthread_t thread[thr_num];
  pthread_attr_t attr;
  pthread_attr_init(&attr);
  pthread_attr_setdetachstate(&attr, PTHREAD_CREATE_JOINABLE);

  // just for debugging //
    struct rlimit rlim;
    getrlimit(RLIMIT_NPROC, &rlim);
    printf ("soft = %d \n", rlim.rlim_cur);
    printf ("hard = %d \n", rlim.rlim_max);
  ////

  for ( i = 1 ; i <= thr_num ; i++) {
    if(pthread_create( &thread[i], &attr, loggerThread, (void*)argv ) ) {
      printf("pthread_create failure, i = %d, errno = %d \n", i, errno);
      exit(1);
    }
  }

  pthread_attr_destroy(&attr);

  for ( i = 1 ; i <= thr_num ; i++) {
    if( pthread_join(thread[i], (void**)&status ) ) {
      exit(1);
    }
  }  

  return 0;
}

void* loggerThread(void* data) 
{
  char** sthg = ((char**)data);
  pthread_exit(NULL);
}

我不明白为什么当我使用 thr_num=291 运行这段代码时，我得到一个错误： pthread_create 失败，i = 291，errno = 11 (EAGAIN)

使用 thr_num=290 工作正常。我在 Linux 2.6.27.54-0.2-default (SLES 11) 上运行此代码 rlim.rlim_cur 的值为 6906，rlim.rlim_max 也有。我在“最大用户进程”中看到的“ulimit -a”相同。 我还检查了 pthread_create 手册页指导的 /proc/sys/kernel/threads-max （它是 13813）。 也没有为 'sysctl -a' 输出找到任何值为 290 的参数。

偶尔我从这个链接中发现： pthread_create and EAGAIN 那就是：“即使调用了pthread_exit或pthread_cancel，父进程仍然需要调用pthread_join来释放pthread ID，然后就可以回收了”

所以只是作为尝试，我将我的代码修改为：

for ( i = 1 ; i <= thr_num ; i++) {
  if(pthread_create( &thread[i], &attr, loggerThread, (void*)argv ) ) {
    printf("pthread_create failure, i = %d, errno = %d \n", i, errno);
    exit(1);
  }

  if( pthread_join(thread[i], (void**)&status ) ) {
    printf("pthread_join failure, i = %d, errno = %d \n", i, errno);
    exit(1);
  }     
}
pthread_attr_destroy(&attr);

然后一切正常：我在 291 循环时没有收到错误。

我想了解为什么我的原始代码会出现错误： 1. 因为错误的线程编程 2. 或者我遇到了一些我无法识别的系统限制

还想知道我的修正是否对这个问题有好处，或者我最终在这个解决方案中引入了哪些隐藏的东西、陷阱？ 谢谢！

Answer 1

我想了解为什么我的原始代码会出现错误：1. 因为错误 使用线程 2 编程。或者我遇到了一些我无法识别的系统限制

您可能达到了系统限制。很可能你的地址空间用完了。默认情况下，每个线程在 linux 上获得 8-10Mb 的堆栈空间。如果您创建 290 个线程，那将使用近 3Gb 的地址空间——32 位进程的最大值。

在这种情况下你会得到 EAGAIN，因为没有足够的资源来创建刚才的线程（因为当时没有足够的可用地址空间）。

当一个线程退出时，并不是线程的所有资源都被释放（在linux上，线程的整个堆栈都保留在周围）。

• 如果线程处于分离状态，例如您调用 pthread_detach() 或在将其创建为 pthread_create() 的属性时指定了分离状态，线程退出时将释放所有资源 - 但您不能 pthread_join() 分离线程。

• 如果线程未分离，则需要对其调用 pthread_join() 以释放资源。

请注意，您在循环内调用 pthread_join() 的修改后的代码将：

1. 产生一个线程
2. 等待该线程完成
3. 去1

即一次只有一个其他线程在运行——这似乎有点毫无意义。

您当然可以生成多个同时运行的线程 - 但有一个限制。在您的机器上，您似乎发现限制在 290 左右。

Answer 2

我最初是作为评论写的，但以防万一......

您的代码：

  for ( i = 1 ; i <= thr_num ; i++) {
    if(pthread_create( &thread[i], &attr, loggerThread, (void*)argv ) ) {
      printf("pthread_create failure, i = %d, errno = %d \n", i, errno);
      exit(1);
    }
  }
...
  for ( i = 1 ; i <= thr_num ; i++) {
    if( pthread_join(thread[i], (void**)&status ) ) {
      exit(1);
    }
  }  

在两个 for() 循环中，您从 1 到 thr_num 进行检查。这意味着您超出了数组 thread[thr_num] 的范围，因为数组从索引 0 开始。因此您应该从 0 迭代到比 thr_num 小一：

for ( i = 0 ; i < thr_num ; i++)

我真的很惊讶你在 thr_num 达到 291 之前没有遇到分段错误。