fd

I/O 在计算机中I/O是 Input/Output 的简写，表示输入和输出。由于程序和运行时的数据是在内存中驻留，并由CPU计算核心来执行，涉及到数据交换的地方比如磁盘、网络等时，就需要I/O接口。 通常程序完成I/O操作会有 Input 和 Output 两个数据流，当然也有只用一个的情况，比如从磁盘读取文件到内存，就只会使用 Input 操作。相反将数据从内存写入到磁盘文件时也只有一个 Output 操作。 输入输出是相对的，需要考虑具体的对象是什么。一般而言，当编写的程序需要读取磁盘文件时，相当于将磁盘的数据输入到程序中，对于程序而言读取的数据就属于 Input ，对于磁盘而言则相当于将数据输出给程序，输出的数据是属于 Output 。 Stream I/O编程中，流 Stream 是一个很重要的概念，可以把流想象成一根管道，数据就是水管中的水，但只能单向流动。 Input Stream 输入流是数据从外部比如磁盘或网络流进内存， Output Stream 输出流则是数据从内存 流到外部。例如，对于浏览网页来说，浏览器和服务器之间至少需要建立了两条水管才能收发数据。 同步异步 由于CPU和内存的速度远高于外设的速度，所以I/O编程中存在速度验证不匹配的问题 。 比如说要将100MB的数据写入磁盘，CPU输出100MB数据只需0.01秒

使用select函数的套接字 如果你想保持现有连接的同时，侦听新的连接，怎么办呢？ 普通的做法（使用recv, accept是做不到的）。当使用accetp等待新的连接时，程序是阻塞的，也就没办法再同原有连接保持通信。 另一种做法是，使用非阻塞方式，但这会浪费了宝贵的CPU时间（你的不停的轮询轮询）。 有没有更好的办法呢？答案是肯定的 – 使用select函数。 select可以帮助你同时监听多个套接字。它会告诉你哪个套接字读数据就绪， 哪个套接字写数据就绪，哪个套接字发生错误。 使用select意味着使用I/O多路技术。 select函数头文件： #include <sys/time.h> #include <sys/types.h> #include <unistd.h> select函数原型： int select(int numfds, fd_set *readfds, fd_set *writefds, fd_set *exceptfds, struct timeval *timeout); 详细信息可查看 man select select()函数的参数说明： numfds 是readfds，writefds，exceptfds 中fd 集合中文件描述符中最大的数字加上1。 readfds 中的fd 集合将由select 来监视是否可以读取。 writefds

copy from : http://gityuan.com/2017/08/05/linux-process-fork/ 基于Kernel 4.4源码 kernel/include/linux/sched.h kernel/include/linux/kthread.h kernel/arch/arm/include/asm/thread_info.h kernel/kernel/fork.c kernel/kernel/exit.c kernel/kernel/sched/core.c 一. 概述 Linux创建进程采用fork()和exec() fork: 采用复制当前进程的方式来创建子进程，此时子进程与父进程的区别仅在于pid, ppid以及资源统计量(比如挂起的信号) exec：读取可执行文件并载入地址空间执行；一般称之为exec函数族，有一系列exec开头的函数，比如execl, execve等 fork过程复制资源包括代码段，数据段，堆，栈。fork调用者所在进程便是父进程，新创建的进程便是子进程；在fork调用结束，从内核返回两次，一次继续执行父进程，一次进入执行子进程。 1.1 进程创建 Linux进程创建： 通过fork()系统调用创建进程 Linux用户级线程创建：通过pthread库中的pthread_create()创建线程 Linux内核线程创建：

curl是一款利用URL语法进行文件传输的工具，它支持多种协议，包括FTP, FTPS, HTTP, HTTPS, GOPHER, TELNET等，我们既可以在命令行上使用它，也可以利用 libcurl进行相关编程。相信大部分同学都应该使用过libcurl的easy 接口，easy接口的使用非常的简单，curl_easy_init用来初始化一个easy curl对象，curl_easy_setopt对easy curl对象进行相关设置，最后curl_easy_perform执行curl请求，返回相应结果。easy接口是阻塞的，也就是说必须等到上一个curl请求执行完后，下一个curl请求才能继续执行，在一般的应用场合，这种阻塞的访问方式是没有问题的，但是当程序需要进行多次curl并发请求的时候，easy接口就无能为力了，这个时候curl提供的multi接口就派上用场了，网上关于libcurl的multi接口的使用资料比较少（百度出来的大部分都是php multi curl的资料），curl官网上貌似也只有相关函数的说明，有实际demo才能让我们更快速的上手使用，所以下面结合实际例子来讲讲multi curl接口的使用方法。 相比而言，multi接口的使用会比easy 接口稍微复杂点，毕竟multi接口是依赖easy接口的，首先粗略的讲下其使用流程：curl_multi

之前看了《 新爆内核高危漏洞sock_sendpage的利用分析的讨论 》这篇帖子，在九贱兄和诸位CUer的指引下，大致弄清了整个漏洞的始末。现与大家分享（引用自 我的空间 ）。 有什么不足之处还望多多指教~ 内核的BUG 这个BUG首先得从sendfile系统调用说起。 考虑将一个本地文件通过socket发送出去的问题。我们通常的做法是：打开文件fd和一个socket，然后循环地从文件fd中read数据，并将读取 的数据send到socket中。这样，每次读写我们都需要两次系统调用，并且数据会被从内核拷贝到用户空间(read)，再从用户空间拷贝到内核 (send)。 而sendfile就将整个发送过程封装在一个系统调用中，避免了多次系统调用，避免了数据在内核空间和用户空间之间的大量拷贝。 ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count); 虽然这个系统调用接收in和out两个fd，但是有所限制，in只能是普通文件，out只能是socket（这个限制不知道后来的内核版本有没有放宽）。 sendfile系统调用在内核里面是怎么实现的呢？这个还是比较复杂，它在内核里面做了原来要在用户态做的事情：创建一个pipe对象作buffer用、从in_fd中读数据到pipe中、将pipe中的数据写到out_fd

　　上一节( https://www.cnblogs.com/yuanwebpage/p/12362876.html )记录了多路IO复用的第一种方式select函数，以及其相应的缺点。本节记录多路IO复用的第二种方式epoll(在windows系统下叫IOCP)。 1. epoll相关函数 　　epoll函数克服了select函数的相关缺点，其优点如下： (1) 只需向OS注册一次文件描述符集合，不用每次循环传递； (2) epoll函数会将发生变化的文件描述符单独集中起来，这样每次遍历时只需要遍历发生变化的文件描述符。 (3) 相对于select同时监听的数量有限制，epoll监听数量一般远大于select，这对于多连接的服务器至关重要。 epoll用来集中通知变化的文件描述符结构体如下: struct epoll_event { __uint32_t events; //用来注册是什么事件需要关注，如输入/输出 epoll_data_t data; } typedef union epoll_data { void* ptr; int fd; //发生变化的文件描述符 __uint32_t u32; __uint64_t u64; } epoll_data_t; //可以看到，常用的为events, fd两个 epoll相关的函数总共有3个: #include <sys

copy from : http://gityuan.com/2016/02/05/android-init/ 基于Android 6.0的源码剖析， 分析Android启动过程进程号为1的init进程的工作内容 system/core/init/ - init.cpp - init_parser.cpp - signal_handler.cpp 一、概述 init进程是Linux系统中用户空间的第一个进程，进程号固定为1。Kernel启动后，在用户空间启动init进程，并调用init中的main()方法执行init进程的职责。对于init进程的功能分为4部分： 解析并运行所有的init.rc相关文件 根据rc文件，生成相应的设备驱动节点 处理子进程的终止(signal方式) 提供属性服务的功能 接下来从main()方法说起。 1.1 main [-> init.cpp] static int epoll_fd = -1; int main(int argc, char** argv) { ... //设置文件属性0777 umask(0); //初始化内核log，位于节点/dev/kmsg【见小节1.2】 klog_init(); //设置输出的log级别 klog_set_level(KLOG_NOTICE_LEVEL); //创建一块共享的内存空间，用于属性服务【见小节5.1

今天学习了一下Python的os模块，主要是针对文件夹和文件路径的一系列操作。 与Python内置函数相比这里这里的函数功能更多样化，功能也更强大。但是学习过程中我发现很多函数都是只适用于unix系统，可能因为它是开源系统，涉及权限的api都是开放的缘故吧。但也正是如此，当我们再Windows上学习Python时，本来这个板块就难以理解，还具有不可操作性。学起来感觉很受打击。 所以这里把Windows上能用，且适用的函数记录下来，以便于以后复习： 1，os.lseek(fd，pos，how) 方法用于设置文件描述符 fd 当前位置为 pos, how 方式修改。（与内置函数类似但是多了一个文件描述符，pos：0代表开头，1代表当前，2代表结尾，how用一个int型表示方式。例10表示从pos往后数10个字节的位置。） 2.os.listdir() 方法用于返回指定的文件夹包含的文件或文件夹的名字的列表。这个列表以字母顺序。 它不包括 '.' 和'..' 即使它在文件夹中。（使用方法os.listdir(path)在Linux中dir或者ls命令也是相同的效果） 3.os.lstat() 方法用于类似 stat() 返回文件的信息,但是没有符号链接。在某些平台上，这是fstat的别名，例如 Windows。 4，os.fstat() 方法用于返回文件描述符fd的状态，类似 stat(

1.1 单工、半双工、全双工 首先，我使用的是芯片为 SP3485E 为半双工通信。 那么先要明确什么是单工、半双工、全双工。 单工数据传输只支持数据在一个方向上传输； 半双工数据传输允许数据在两个方向上传输 ，但是，在某一时刻，只允许数据在一个方向上传输，它实际上是一种切换方向的单工通信； 全双工数据通信允许数据同时在两个方向上传输 ，因此，全双工通信是两个单工通信方式的结合，它要求发送设备和接收设备都有独立的接收和发送能力。 网卡的全双工（Full Duplex）是指网卡在发送数据的同时也能够接收数据，两者同步进行，这好像我们平时打电话一样，说话的同时也能够听到对方的声音。目前的网卡一般都支持全双工。 提到全双工，就不能不提与之密切对应的另一个概念，那就是“半双工（Half Duplex）”， 所谓半双工就是指一个时间段内只有一个动作发生 ，举个简单例子，一条窄窄的马路，同时只能有一辆车通过， 当目前有两量车对开，这种情况下就只能一辆先过，等到头儿后另一辆再开，这个例子就形象的说明了半双工的原理。早期的对讲机、以及早期集线器等设备都是基于半双工的产品。随着技术的不断进步，半双工会逐渐退出历史舞台。 1.2 关于RS485通信 RS232 标准是诞生于 RS485 之前的，但是 RS232 有几处不足的地方： 接口的信号电平值较高， 达到十几 V，使用不当容易损坏接口芯片

epoll的接口非常简单，总共只有三个函数： 1、int epoll_create(intsize); 生成一个 Epoll 专用的文件描述符，size用来告诉内核这个监听的数目一共有多大。这个参数不同于select()中的第一个参数，给出最大监听的fd+1的值。需要注意的是，当创建好epoll句柄后，它就是会占用一个fd值，在linux下如果查看/proc/进程id/fd/，是能够看到这个fd的，所以在使用完epoll后，必须调用close()关闭，否则可能导致fd被耗尽。 其实是申请一个内核空间，用来存放你想关注的 socket fd 上是否发生以及发生了什么事件。 size 就是你在这个 Epoll fd 上能关注的最大 socket fd 数，大小自定，只要内存足够。 2、int epoll_ctl(intepfd, int op, int fd, struct epoll_event *event); epoll的事件注册函数，它不同与select()是在监听事件时告诉内核要监听什么类型的事件，而是在这里先注册要监听的事件类型。它用来控制某个epoll 文件描述符上的事件：注册、修改、删除。其中参数 epfd 是 epoll_create() 创建 Epoll 专用的文件描述符。相当于 select 模型中的 FD_SET 和 FD_CLR 宏。 第一个参数是epoll