网络编程要依赖于一直依赖学习的几乎所有系统概念, 包括进程, 信号, 处理字节, 内存映射和动态内存分配. 除此之外, 就是一些关于网络的概念, 包括最基础的客户端-服务器模型, 因特网的基础概念.

1. CS模型
2. Internet - 抽象模型
3. Internet - IP地址
4. Internet - 域名
5. Internet - 连接
6. 套接字地址数据结构

CS模型

客户端-服务器模型: 一个应用由一个服务器进程和一个或多个客户端进程组成.

客户端-服务器模型中的基本操作是事务, 一个事务由如下四个步骤组成:

1. 客户端向服务器发起请求
2. 服务器收到请求后解释, 然后进行操作
3. 操作完成后发送一个响应, 并等待下一个请求
4. 客户端收到响应并处理

要认识到客户端和服务器并不是主机, 而是一个一个进程. 因此一台机器上可以有很多服务器和客户端.

CSAPP提供了程序员所需要知道的网络模型. 没有太过于深入细节.

1. 对主机而言, 网络也只是一种I/O设备, 是数据源和数据接收方. 数据可以从网络适配器复制到内存, 也可以从内存复制到网络适配器.
2. 物理上, 网络是一个按照地理远近组织的层次系统, 最低层是LAN即局域网, 局域网所使用的技术叫做以太网. 以太网段内的电缆具有相同的带宽
3. 一个以太网段包括用电缆和集线器互相连接的计算机, 以太网通常跨越一些小的区域, 比如一栋楼. 每一个电缆从主机连接到集线器, 集线器将每个收到的信号不加区别的复制到所有的端口上, 所有的主机都可以看到所有的数据.
4. 每一个以太网适配器上边有一个全球唯一的48位地址, 即MAC地址. 主机可以发送一段二进制位(被称为一个帧 frame)到当前网段的任何主机, 每个帧包括一定的头部信息用来标识帧的源头和目的地以及此帧的长度, 之后是有效载荷. 由于集线器将数据复制到所有接口, 所以所有同网段的主机都能看到, 但只有目的主机接收它.
5. 使用一种网桥设备, 可以将多个以太网段连接成较大的局域网, 称为桥接以太网. 连接桥与桥的电缆的速度一般比局域网内的速度要快. 网桥与集线器不同, 会有选择的转发信息.
6. 多个局域网使用路由器的特殊计算机来连接, 组成一个互联网. 每台路由器对于它连接到的每个网络都有一个适配器(端口),

由此可见, 其实全世界互联网上的电脑, 都是通过多层的设备物理连接在一起的, 由不同技术的局域网和广域网组成, 如何能让一台计算机的信息可以达到任何一台计算机呢?

答案是每台路由器和主机上, 都有相关的协议软件, 控制所有的设备协同发送和处理数据. 协议软件提供两种基本机制:

1. 命名机制, 每台主机会被分配一个互联网络地址.
2. 传送机制, 将数据统一包装成不连续的片(称为包)来消除了差异. 每个包都由包头和有效载荷组成.

Internet - 抽象模型

全球IP互联网是目前大家在使用的计算机网络, 其中的每台主机都实现了TCP/IP协议. 客户端和服务器都使用套接字接口函数和Unix I/O函数进行通信. 一般套接字函数都是操作系统实现, 系统调用会通过内核来使用各种TCP/IP函数.

TCP/IP 不是单一的协议, 而是一组协议, IP协议提供基本的命名方法和传送机制,从一台机器向另外一台机器发送数据. TCP是在IP协议基础上构建的, 目的是提供进程间可靠的全双工连接. 一般将TCP/IP看做一个整体.

UDP协议是IP协议的扩展, CSAPP不讨论UDP.

从程序员的角度, 可以把互联网看成:

1. 主机集合是32位的IP地址的集合
2. IP地址被映射成域名
3. 机器之间可以通过connection 连接 来进行通信

Internet - IP地址

IP地址是一个32位无符号整数, 表示的时候用 x.x.x.x 来表示, 每个x都是一个8位二进制数的无符号十进制表示, 也就是从0-255.

IP地址在系统里是一个结构:

struct in_addr {
    uint32_t s_addr;
}

由于主机可能有大端法或者小端法, TCP/IP规定了网络字节顺序按照大端字节顺序进行存放. 比如IP地址, 在网络传输的时候按照大端法排列. Unix有如下函数用于转换网络字节顺序和主机字节顺序:

#include <arpa/inet.h>

//下边两个函数按照网络字节顺序转换16位或者32位数值
uint32_t htonl(uint32_t hostlong);
uint16_t htonl(uint16_t hostlong);

//按照主机字节顺序转换16位或者32位数值
uint32_t ntohl(uint32_t netlong);
uint16_t ntohs(uint16_t netshort);

这些函数没有处理64位的函数, 看来处理64位需要自己排布.

还有两个函数可以用来转换IP地址和十进制表示的IP地址:

#include <arpa/inet.h>

//将src转换成IP地址放入dst指针指向的对象内. 如果成功返回1, 如果src非法返回0, 如果出错返回-1
int inet_pton(AF_INET, const char *src, void *dst);

//将IP地址转换成字符串, 返回指向字符串的指针, 出错就返回NULL
const char *inet_ntop(AF_INET, const void *src, char *dst, socklen_t size);

这些函数一般用n表示网络, p表示字符串表示. AF_INET 表示32位 IPV4 地址, 其实还可以处理 128位的IPV6地址.

练习11.1 完成下表:

练习11.2 编写将十六进制参数转换为点分十进制串并打印出来

这个需要先调用函数将其转换成大端法字节顺序, 然后再调用转换函数来转换.

#include <arpa/inet.h>
#include <stdio.h>
#include <stdlib.h>

int main(int argc, char** argv){

    if(argv[1]==NULL) {
        unix_error("Please input a number");
    }

    char *end;
    //调用strtol函数按照16进制读取数值
    unsigned int addr = strtol(argv[1], &end, 16);
    //将读取的无符号int按照网络字节排序
    addr = htonl(addr);
    //转换无符号int到ip地址, 放入end中
    inet_ntop(AF_INET, &addr, end, 16);
    //打印IP地址
    printf("%s\n", end);
}

练习11.3 将IP地址字符串转换成16进制数

这个思路也很明显, 先将IP地址转换成无符号数, 然后按照主机字节重新排列即可.

#include <arpa/inet.h>
#include <stdio.h>
#include <stdlib.h>

int main(int argc, char** argv){

    if(argv[1]==NULL) {
        unix_error("Please input a number");
    }

    char *end;

    unsigned int addr;
    //转换成数值
    inet_pton(AF_INET, argv[1], &addr);
    //重新按主机字节顺序排列
    addr = ntohl(addr);

    printf("0x%x\n", addr);

}

Internet - 域名

对于一个类似 whaleshark.ics.cs.cmu.edu 的域名来说:

1. edu是一级域名, 一级域名再向上是一个未命名的根节点
2. cmu是二级域名, 一旦有了一个二级域名, 可以任意在其下创建子域名
3. cs是 第三层域名, 以此类推, ics 是第四级域名...

客户端和服务器通信的时候是靠的IP地址, 然而IP地址对人来说不够直观, 因此有了域名的概念. 域名映射到IP地址, 这样只要知道了域名, 就可以通过DNS服务来查找对应的域名.

Linux 有一个命令叫做 NSLOOKUP, 展示IP地址对应的域名, 可以用来进行一些实验.

首先是本地地址, 这是定义好的名称叫做localhost, 这个名称总是映射为127.0.0.1, 叫做回送地址, 本地回环地址等等很多名称.

执行 nslookup localhost的输出如下:

[root@VM_0_7_centos csapp]# nslookup localhost
Server:         183.60.83.19
Address:        183.60.83.19#53

Name:   localhost
Address: 127.0.0.1

Internet - 连接

可以将连接的抽象看成是两个套接字作为两个端点的一条线. 连接是点对点, 全双工和可靠的.

对于程序员来说, 关键就是要搞清楚连接的端点及套接字. 由于之前的客户端-服务器模型, 套接字分为客户端套接字和服务端套接字.

客户端套接字的端口是由系统分配的, 服务端的端口一般是知名端口, 即已经在操作系统中注册的常用服务和端口映射关系中已经使用的端口. 可以在 /etc/services中找到所有的知名端口.

除了端口之外, 还必须知道IP地址. 所以一个IP地址和一个端口就组成了一个套接字地址, 即"地址:端口"的组合.

将一个客户端的套接字地址和一个服务端的套接字端口组合起来, 就得到了一个套接字对, 用于唯一标识一个连接.

编写程序使用套接字, 一般都需要使用操作系统提供的套接字接口, 即一批操作套接字的函数.

客户端使用套接字接口的一般逻辑是:

1. getaddrinfo函数, 转换主机地址, 端口到套接字地址结构
2. 上边的函数内部先调用socket函数创建套接字描述符
3. 上边的函数内部再调用connect函数创建已连接描述符
4. 向已连接描述符中写内容, 即发送请求
5. 从已连接描述符中读内容, 即接收响应
6. 关闭套接字, 操作系统会当成EOF

服务端使用套接字接口的一般逻辑是:

1. getaddrinfo函数
2. socket函数创建套接字, 这个和客户端一样
3. 使用bind将服务器套接字地址和描述符联系起来
4. listen函数将套接字转换成监听套接字
5. accept函数尝试接受连接, 返回一个已连接描述符
6. 从已连接描述符中读取信息, 即接受请求
7. 向已连接描述符中发送信息, 即返回响应
8. 再想读取信息, 接收到EOF, 关闭已连接描述符

套接字地址数据结构

从程序员的角度来说, 套接字就是一个有相应描述符的文件.

系统里的套接字地址数据类型是 sockaddr_in 的16字节长度的结构中, 这个结构如下:

struct sockaddr_in {


    uint16_t sin_family;        //协议族, 就是固定的AF_INET, 2字节长
    uint16_t sin_port;          //16位的端口号,2 字节长
    struct in_addr sin_addr;    //网络字节顺序的地址, 4字节长
    unsigned char sin_zero[8]   //8字节长的字符数组, 用于补齐这个结构到与 sockaddr 这个结构一样长.
}

为何要补齐到16字节, 是因为 sockaddr_in 之上还有一个通用的 sockaddr 结构, 如下:

struct sockaddr {

    uint16_t sa_family;         //协议族
    char sa_data[14];           //地址信息
}

为何要这么设计, 是因为在当时编写套接字接口函数的时候, C语言还没有通用的指针 void * 类型. 而套接字接口函数很多都需要一个指向套接字地址结构的指针, 因此就定义了一个通用的套接字地址结构 sockaddr. 在具体使用套接字的时候, 再将这个指针转换成具体的套接字类型, 比如 sockaddr_in.

所以可以定义一个通用类型:

typedef struct sockaddr SA;

需要转换sockaddr_in 到 套接字通用结构指针的时候就可以用这种.

后边就来看一看具体的套接字接口函数吧