【问题标题】:How to code an epoll based sockets client in C如何在 C 中编写基于 epoll 的套接字客户端
【发布时间】:2019-01-17 12:33:49
【问题描述】:

我可以在网上找到的所有示例都是服务器。我想使用 epoll 构建一个基本的网络爬虫。所以我需要一个基本的客户端示例来帮助我入门。

当我说基本时,我的真正意思是一个完整的示例,该示例演示了向实时 Web 主机发送和接收数据的多个连接。例如一个简单的 HEAD 请求及其响应。

【问题讨论】:

  • 您认为客户端与服务器端有何不同? epoll() 不知道区别。每当您有多个正在侦听输入的套接字时,您都可以使用相同的方式。

标签: c sockets client epoll


【解决方案1】:

这是带有 epoll 的客户端套接字的示例 c 代码。

#include <stdlib.h>
#include <stdio.h>
#include <string.h>
#include <errno.h>
#include <sys/socket.h>
#include <resolv.h>
#include <sys/epoll.h>
#include <arpa/inet.h>
#include <unistd.h>

#define PORT 22
#define SERVER "127.0.0.1"
#define MAXBUF 1024
#define MAX_EPOLL_EVENTS 64

int main() {
    int sockfd;
    struct sockaddr_in dest;
    char buffer[MAXBUF];
    struct epoll_event events[MAX_EPOLL_EVENTS];
    int i, num_ready;

    /*---Open socket for streaming---*/
    if ( (sockfd = socket(AF_INET, SOCK_STREAM|SOCK_NONBLOCK, 0)) < 0 ) {
        perror("Socket");
        exit(errno);
    }

    /*---Add socket to epoll---*/
    int epfd = epoll_create(1);
    struct epoll_event event;
    event.events = EPOLLIN; // Cann append "|EPOLLOUT" for write events as well
    event.data.fd = sockfd;
    epoll_ctl(epfd, EPOLL_CTL_ADD, sockfd, &event);

    /*---Initialize server address/port struct---*/
    bzero(&dest, sizeof(dest));
    dest.sin_family = AF_INET;
    dest.sin_port = htons(PORT);
    if ( inet_pton(AF_INET, SERVER, &dest.sin_addr.s_addr) == 0 ) {
        perror(SERVER);
        exit(errno);
    }

    /*---Connect to server---*/
    if ( connect(sockfd, (struct sockaddr*)&dest, sizeof(dest)) != 0 ) {
        if(errno != EINPROGRESS) {
            perror("Connect ");
            exit(errno);
        }
    }

    /*---Wait for socket connect to complete---*/
    num_ready = epoll_wait(epfd, events, MAX_EPOLL_EVENTS, 1000/*timeout*/);
    for(i = 0; i < num_ready; i++) {
        if(events[i].events & EPOLLIN) {
            printf("Socket %d connected\n", events[i].data.fd);
        }
    }

    /*---Wait for data---*/
    num_ready = epoll_wait(epfd, events, MAX_EPOLL_EVENTS, 1000/*timeout*/);
    for(i = 0; i < num_ready; i++) {
        if(events[i].events & EPOLLIN) {
            printf("Socket %d got some data\n", events[i].data.fd);
            bzero(buffer, MAXBUF);
            recv(sockfd, buffer, sizeof(buffer), 0);
            printf("Received: %s", buffer);
        }
    }

    close(sockfd);
    return 0;
}

【讨论】:

  • 这个是边缘触发还是电平触发版本
  • 默认情况下,epoll是级别触发的。为了让它表现为边缘触发,需要在事件标志 (event.events) 中添加“|EPOLLET”位
  • 如果给定一个具有 100,000 个 IP 地址的文件,如何扩展此代码以处理 10,000 个同时连接?
  • 当您处理 100K 对等点时,除了 epoll 接口之外,还有很多事情需要处理。例如,连接失败、重试、部分读取、慢速对等点、HTTP 解析错误等。可以设计许多不同的方式。通常,我会从一个用于连接对等点的“连接”线程开始,以及一个用于从套接字读取数据的“读取”线程池。有一个类似 IPC 的管道将连接的套接字 fd 从“连接”传递到“读取”线程。我相信当你开始使用它时,会有更多这样的场景需要处理。万事如意!
  • epoll_ctl 和 EPOLL_CTL_ADD 应该为每个套接字调用一次。并且当调用 epoll_wait 时,它会监控所有添加的套接字,并且只返回那些有一些事件要消费的 FD。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2020-10-08
  • 2021-11-14
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多