摘要：
总结： 不仅tcp协议能对数据段进行分割，ip协议也具备这个功能，之所以会这样是两者都受到底层MTU的限制（虽说tcp是根据MSS限制来分割数据包，由于MTU＝tcp包头＋ip包头＋MSS，所以其实也算是受MTU的制约。）。但是尽量别让ip协议来负责数据包的分包工作，因为虽然ip协议会对数据包进行分... 阅读全文
摘要：
BM25算法是一种常见用来做相关度打分的公式，思路比较简单，主要就是计算一个query里面所有词和文档的相关度，然后在把分数做累加操作,而每个词的相关度分数主要还是受到tf/idf的影响。公式如下：R(qi,d)是每个词和文档的相关度值，其中qi代表每个词，d代表相关的文档，Wi是这个词的权重，然后... 阅读全文
摘要：
listen函数是用来设置监听连接的句柄和队列当listen函数执行完成以后，服务端就已经可以接受客户端来的新连接了，新连接完成以后listen会把客户端的ip，port和连接句柄放在监听队列里面，等待accept函数来取，如果监听队列满了，listen会拒绝新来的连接。accept仅仅是从监听队列... 阅读全文
摘要：
close函数首先是将传入的socket句柄引用数减1（因为fork进程时会导致socket句柄被多个进程引用），待到引用数等于0的时候，close才会真正关闭连接。shutdown函数是立刻关闭连接（忽视句柄引用数值），关闭有三种方式SHUT_RD 关闭调用进程的读通道，调用进程立刻不能读网络数据... 阅读全文
摘要：
网络程序异常退出无core文件产生这种情况发生在一边连接端已经关闭，但是另外一边还在对连接句柄做send操作，这样做send操作的进程会收到SIGPIPE信号，默认行为是直接退出且不会产生core。为了避免退出，一般在启动的时候加上 signal(SIGPIPE, SIG_IGN) 来忽略这种错误。... 阅读全文
摘要：
DocFieldProcessor类的任务1 按顺序存储所有的field和对应的fieldinfo2 为当前这篇doc的field按照fieldname来建立hash索引3 调用InvertedDocConsumer类（抽象），对field的内容分词和建立内存索引DocFieldProcessor类... 阅读全文
摘要：
1 一个资源同时可以有多个读写，但是只能有一个写锁2 用flag代表锁的状态，#define un_lock 0#define r_lock1 //上一把读锁加一个r_lock#define w_lock -1伪代码1 LOCK_Rpthread_lock(resource.mutex)while(... 阅读全文