首页 > 代码库 > TinyWS —— 一个C++写的简易WEB服务器(三)

TinyWS —— 一个C++写的简易WEB服务器(三)

写在前面

代码已经托管在 https://git.oschina.net/augustus/TinyWS.git

可以用git clone下来。由于我可能会偶尔做一些修改,不能保证git 库上的代码与blog里的完全一致(实际上也不可能把所有的代码都贴在这里)。另外,TinyWS是基于linux写的(ubuntu 14.10 + eclipse luna,eclipse工程我也push到了git库),故在Windows上可能无法正常编译(主要是系统调用 部分可能会不同)。

前面的内容可参考上一篇  http://www.cnblogs.com/cuiluo/p/4219946.html

NetConnection

NetConnection类封装了对socket的操作。socket的原理前面简单说过,其使用方法许多地方都有介绍,这里不细说,其实对于服务端,不过就是打开socket,监听某端口,而后等待客户端请求几个步骤。

// NetConnectionclass NetConnection{public:    NetConnection();    void lisen(int port);    int accept();    void close();private:    int lisenfd;    int connfd;};

其中lisenfd是打开socket时系统函数返回的描述符,在accept客户端请求时会用到;而connfd是调用accept系统函数时返回的文件描述符,也就是实际上的数据通道。

在NetConnection的实现中,实际上在匿名namespace中封装系统调用的函数(包括后面IO操作时对系统调用的封装),摘取自《深入理解计算机系统》这本书。

// NetConnection.cppnamespace{const int  LISTENQ = 1024;void unix_error(char *msg) /* unix-style error */{    fprintf(stderr, "%s: %s\n", msg, strerror(errno));    exit(0);}int open_listenfd(int port){    int listenfd, optval = 1;    struct sockaddr_in serveraddr;    /* Create a socket descriptor */    if ((listenfd = socket(AF_INET, SOCK_STREAM, 0)) < 0)        return -1;    /* Eliminates "Address already in use" error from bind. */    if (setsockopt(listenfd, SOL_SOCKET, SO_REUSEADDR, (const void *) &optval,            sizeof(int)) < 0)        return -1;    /* Listenfd will be an endpoint for all requests to port     on any IP address for this host */    bzero((char *) &serveraddr, sizeof(serveraddr));    serveraddr.sin_family = AF_INET;    serveraddr.sin_addr.s_addr = htonl(INADDR_ANY);    serveraddr.sin_port = htons((unsigned short) port);    if (bind(listenfd, (sockaddr *) &serveraddr, sizeof(serveraddr)) < 0)        return -1;    /* Make it a listening socket ready to accept connection requests */    if (listen(listenfd, LISTENQ) < 0)        return -1;    return listenfd;}int Open_listenfd(int port){    int rc;    if ((rc = open_listenfd(port)) < 0)        unix_error("Open_listenfd error");    return rc;}int Accept(int s, struct sockaddr *addr, socklen_t *addrlen){    int rc;    if ((rc = accept(s, addr, addrlen)) < 0)        unix_error("Accept error");    return rc;}void Close(int fd){    int rc;    if ((rc = close(fd)) < 0)        unix_error("Close error");}}NetConnection::NetConnection() : lisenfd(-1), connfd(-1){}void NetConnection::lisen(int port){    lisenfd = Open_listenfd(port);}int NetConnection::accept(){    int clientlen;    struct sockaddr_in clientaddr;    clientlen = sizeof(clientaddr);    connfd = Accept(lisenfd, (sockaddr *) &clientaddr, reinterpret_cast<socklen_t*>(&clientlen));    return connfd;}void NetConnection::close(){    Close(connfd);}

IoReader

IoReader类和后面的IoWriter类实际上是封装了底层的IO操作,为业务提供更简单的接口。

// IoReader.hclass IoReader{public:    IoReader(int fd);void getLineSplitedByBlank(std::vector<std::string>& buf);};

这个类中,只对外提供了一个接口,用于读取http请求的报头。这个接口从accept函数返回的文件描述符中(实际就是客户端传过来的数据)读取一行,并使用“ ”分隔成多个字符串后返回。这个实际上就是对http请求报头的解析。一个请求报头,第一行可能是这样的:

GET / HTTP/1.1

包含三部分,方法名,请求的uri和协议版本号,它们之间使用“ ”分隔。当然,一个真正的GET请求后面还有若干行,但是对于我们这个简单的服务器来说,只有第一行是需要的,其他行都简单的忽略了。如果一个uri为 “/”,则说明是要返回主页,我们这里写死了为Index.html,实际上应该做成可配置,这个留作后面再改吧。

所以,getLineSplitedByBlank这个方法,就是把已经分隔好的字符串容器返回了。

//IoReader.cppnamespace{const int MAX_LENGTH = 8192;struct rio_t{    int rio_fd; /* descriptor for this internal buf */    int rio_cnt; /* unread bytes in internal buf */    char *rio_bufptr; /* next unread byte in internal buf */    char rio_buf[MAX_LENGTH]; /* internal buffer */};void unix_error(char *msg) /* unix-style error */{    fprintf(stderr, "%s: %s\n", msg, strerror(errno));    exit(0);}void rio_readinitb(rio_t *rp, int fd){    rp->rio_fd = fd;    rp->rio_cnt = 0;    rp->rio_bufptr = rp->rio_buf;}void Rio_readinitb(rio_t *rp, int fd){    rio_readinitb(rp, fd);}static ssize_t rio_read(rio_t *rp, char *usrbuf, size_t n){    int cnt;    while (rp->rio_cnt <= 0)    { /* refill if buf is empty */        rp->rio_cnt = read(rp->rio_fd, rp->rio_buf, sizeof(rp->rio_buf));        if (rp->rio_cnt < 0)        {            if (errno != EINTR) /* interrupted by sig handler return */                return -1;        }        else if (rp->rio_cnt == 0) /* EOF */            return 0;        else            rp->rio_bufptr = rp->rio_buf; /* reset buffer ptr */    }    /* Copy min(n, rp->rio_cnt) bytes from internal buf to user buf */    cnt = n;    if (rp->rio_cnt < n)        cnt = rp->rio_cnt;    memcpy(usrbuf, rp->rio_bufptr, cnt);    rp->rio_bufptr += cnt;    rp->rio_cnt -= cnt;    return cnt;}ssize_t rio_readlineb(rio_t *rp, void *usrbuf, size_t maxlen){    int n, rc;    char c, *bufp = reinterpret_cast<char*>(usrbuf);    for (n = 1; n < maxlen; n++)    {        if ((rc = rio_read(rp, &c, 1)) == 1)        {            *bufp++ = c;            if (c == ‘\n‘)                break;        }        else if (rc == 0)        {            if (n == 1)                return 0; /* EOF, no data read */            else                break; /* EOF, some data was read */        }        else            return -1; /* error */    }    *bufp = 0;    return n;}ssize_t Rio_readlineb(rio_t *rp, void *usrbuf, size_t maxlen){    ssize_t rc;    if ((rc = rio_readlineb(rp, usrbuf, maxlen)) < 0)        unix_error("Rio_readlineb error");    return rc;}rio_t rio;}IoReader::IoReader(int fd){    Rio_readinitb(&rio, fd);}void IoReader::getLineSplitedByBlank(std::vector<std::string>& buf){    char innerBuf[MAX_LENGTH], method[MAX_LENGTH], uri[MAX_LENGTH], version[MAX_LENGTH];    Rio_readlineb(&rio, innerBuf, MAX_LENGTH);    sscanf(innerBuf, "%s %s %s", method, uri, version);    buf.push_back(method);    buf.push_back(uri);    buf.push_back(version);}

这里面,匿名namespace里面的函数,也是取自《深入理解计算机系统》那本书,而且几个地方还引入了重复代码,目前这样做只是为了快速实现而已,这也是我想要重构的地方。不过研究了半天还是没有完全搞清楚怎样将C++标准库中的IO流绑定在一个操作系统的文件描述符上面(当然,C的库函数很容易做到这一点),我想应该是有方法的,可惜我不熟悉这里。虽然我是靠C++吃饭的,也是做的所谓“嵌入式”系统,不过对于那种比较大型的通信软件,像我这种做业务层的,甚至不直接和操作系统打交道,也不会使用标准库,因为其他部门的同事会提供一个平台层。所以我对于这些操作并不是很了解。

IoWriter

这个类与IoReader对应,是封装底层IO写操作的,实际上就是向客户端发送数据。当解析出客户端想要访问的uri后,这里就会将相应的文件发送回去,这后浏览器解析这个文件,我们就能看到网页了。

// IoWriter.hclass IoWriter{public:    IoWriter(int fd);    void writeString(const std::string& str);    void writeFile(const std::string& fileName, int filesSize);private:    int fileDescriptor;};

这个类提供了两个接口writeString 是写入一个字符串,主要是用于发送响应报头的,writeFile就是真正的把客户端想要的文件返回。

我们看一个应答报头的例子:

HTTP/1.0 200 OKServer: Tiny Web ServerContent-length: 120Content-type: text/html

第一行的 200 就是返回成功,当然HTTP的返回码大家都很熟悉,比如200是成功,404是找不到文件,403是操作权限不足等等,这里不多说了。第二行是服务器类型,我们这里当然就是TinyWS,后面两行是待返回文件的大小和类型。返回报头之后,再调用writeFile方法,返回真正的文件。

// IOWriter.cpp
namespace
{void unix_error(char *msg) /* unix-style error */{ fprintf(stderr, "%s: %s\n", msg, strerror(errno)); exit(0);}ssize_t rio_writen(int fd, void *usrbuf, size_t n){ size_t nleft = n; ssize_t nwritten; char *bufp = reinterpret_cast<char*>(usrbuf); while (nleft > 0) { if ((nwritten = write(fd, bufp, nleft)) <= 0) { if (errno == EINTR) /* interrupted by sig handler return */ nwritten = 0; /* and call write() again */ else return -1; /* errorno set by write() */ } nleft -= nwritten; bufp += nwritten; } return n;}void Rio_writen(int fd, void *usrbuf, size_t n){ if (rio_writen(fd, usrbuf, n) != n) unix_error("Rio_writen error");}int Open(const char *pathname, int flags, mode_t mode){ int rc; if ((rc = open(pathname, flags, mode)) < 0) unix_error("Open error"); return rc;}void Close(int fd){ int rc; if ((rc = close(fd)) < 0) unix_error("Close error");}void* Mmap(void *addr, size_t len, int prot, int flags, int fd, off_t offset){ void *ptr; if ((ptr = mmap(addr, len, prot, flags, fd, offset)) == ((void *) -1)) unix_error("mmap error"); return (ptr);}void Munmap(void *start, size_t length){ if (munmap(start, length) < 0) unix_error("munmap error");}}IoWriter::IoWriter(int fd) : fileDescriptor(fd){}void IoWriter::writeString(const std::string& str){ Rio_writen(fileDescriptor, const_cast<char*>(str.c_str()), str.length());}void IoWriter::writeFile(const std::string& fileName, int filesSize){ int srcfd; char *srcp; srcfd = Open(const_cast<char*>(fileName.c_str()), O_RDONLY, 0); srcp = reinterpret_cast<char*>(Mmap(0, filesSize, PROT_READ, MAP_PRIVATE, srcfd, 0)); Close(srcfd); Rio_writen(fileDescriptor, srcp, filesSize); Munmap(srcp, filesSize);}

这个实现我也非常不喜欢,由于使用了那本经典书中的代码,和前面产生了很多重复。留作后面重构吧

现在,TinyWS已经基本介绍完了,我们在看一下主函数:

// Tiny.cppnamespace{int getPortFromCommandLine(char **argv){    return atoi(argv[1]);}int getDefalutPort(){    return 8080;}int getStartPort(int argc, char **argv){    if (argc == 2)        return getPortFromCommandLine(argv);    else        return getDefalutPort();}}int main(int argc, char **argv){    NetConnection connection;    connection.lisen(getStartPort(argc, argv));    while (1)    {        int connfd = connection.accept();        RequestManager(connfd).run();        connection.close();    }}

匿名namespace中的函数,是为了获取监听端口的,如果用户启动服务时在命令行中输入了端口,则使用用户提供的端口,否则就使用默认的8080端口,当然,这个默认值最好也应该出现在配置文件中。之所以没有选择80端口,是因为我的机器上装了apache,已经监听了80端口,否则大可不必如此,还要每次测试还要输入端口号。

测试

在代码目录中有一个我写的用于测试的一组html页面(包括html文件,图片,还有一个CSS文件),就目前存放的位置来说,如果使用eclipse倒入了这个工程,运行其TinyWS后,就可以使用http://127.0.0.1:8080/访问到它的主页。

这是一个关于蜂鸟的一组页面,其实是帮老婆写的一个作业。老婆一边工作还要一边在某高校念教育学硕士,这个专业有一门似乎是“远程教育”的课程,还让学生都要写一组html页面,确实有点过分了,不过也只好我代劳了。我做页面的水平很初级,所以页面本身很难看,对于测试静态页面倒也够用了。这中间还发现一个问题,就是经常浏览器(我使用firefox)解析之后,CSS中定义好的格式就没有了,可能刷新几次就又恢复了,目前还没仔细研究是怎么一回事。

后记

整个TinyWS中有很多可以优化和重构的地方,留作后面重构吧。同时哪位朋友知道如何将C++标准库的IO流绑定到文件描述符上,也请不吝赐教。

我在处理IO操作的地方,使用了《深入理解计算机系统》这本书里的示例代码,这本书是很不错的,几乎讲了计算机系统的方方面面,可惜我总是在前几章不断徘徊,后面的内容只是偶尔翻过,但是还记得有讲IO的网络的章节。在这本书讲网络的那章,也有一个WEB服务器的例子,是用C语言写的,区区200多行代码,实现的功能基本和我这里相同。

我这里的TinyWS,自认为也是使用“OO”的方法实现的(当然我的设计水平很烂),还不自觉的用了几个“设计模式”(还计划用设计模式改造一下response和IO操作),但看了那个C语言的例子后,我在想,如果使用OO的方法,如何才有那样简洁的实现呢?在有些时候,OO可能真的会将简单的问题复杂化。(当然,那个C语言例子的风格我并不喜欢,从命名到程序结构应该都可以做的更好,但是那份简洁真的打动了我)。

也许没有一种方法在任何时候都是合适的,才是真理吧。

最后这段也许会引起“宗教情结”一样的争论的,还好此文的读者也不会太多。

TinyWS —— 一个C++写的简易WEB服务器(三)