kakamilan

摘要： 1 #ifndef _FILE_ENGINE_H_031104_ 2 #define _FILE_ENGINE_H_031104_ 3 4 #include "DataEngine.h" 5 6 enum fileengine_type 7 { 8 ISAM, 9 TIANWANG,10 LINK4SE11 };12 13 class CUrl;14 class CPage;15 16 struct file_arg17 {18 CUrl *pUrl;19 CPage *pPage;20 };21 22 class CFileEngine : pu... 阅读全文

摘要： 1 #ifndef _DATA_ENGINE_H_031104 2 #define _DATA_ENGINE_H_031104 3 4 #include "Tse.h" 5 6 enum dataengine_type 7 { 8 FILE_ENGINE, 9 DATABASE_ENGINE10 };11 12 class CDataEngine13 {14 public:15 string m_str; // database engine ---connecting string16 // file engine ---file path & name... 阅读全文

摘要： 涉及到的算法涉及到的题目链接二分法548-div2-2拓扑排序550-div2-3http://www.cnblogs.com/kakamilan/archive/2012/07/23/2605636.html概率分析537-div2-3最小费用最大流537-div1-3http://www.cnblogs.com/kakamilan/archive/2012/08/17/2644315.htmlKMP算法http://www.cnblogs.com/kakamilan/archive/2012/10/14/2723248.htmlsg函数(nim博弈游戏)561-div1-2565-div1 阅读全文

摘要： 本来早就该写的，一直拖到现在。第一题应该算是很水的题，就是数字的种类乘以某种数字出现的最大次数。http://community.topcoder.com/stat?c=problem_solution&rm=313611&rd=15170&pm=11985&cr=23038076第二题比赛期间没有想到，后来看来一下别人的，原来用二分法就可以搞定了 1 #include <iostream> 2 #include <string> 3 #include <vector> 4 #include <cstdlib> 5 阅读全文

摘要： 1 #ifndef _Crawl_H_031104_ 2 #define _Crawl_H_031104_ 3 4 //#include <openssl/md5.h> 5 #include <zlib.h> 6 7 #include "Tse.h" 8 #include "Http.h" 9 #include "StrFun.h"10 #include "Url.h"11 #include "Page.h"12 #include "TianwangFile.h 阅读全文

摘要： 1 #ifndef _HTTP_H_031105_ 2 #define _HTTP_H_031105_ 3 4 #include <map> 5 6 using namespace std; 7 8 class CHttp 9 {10 private:11 string m_strUrl; // url12 int *m_sock; // socket13 14 public:15 CHttp();16 virtual ~CHttp();17 18 19 //strUrl: 待抓取的网页对应的URL20 //file... 阅读全文

摘要： 1 #ifndef _URL_H_030728_ 2 #define _URL_H_030728_ 3 4 #include <string> 5 6 const unsigned int URL_LEN = 256; 7 const unsigned int HOST_LEN = 256; 8 9 using namespace std;10 11 12 enum url_scheme {13 SCHEME_HTTP,14 SCHEME_FTP,15 SCHEME_INVALID16 };17 18 const int DEFAULT_HTTP_P... 阅读全文

摘要： 1 #ifndef _Page_H_030728_ 2 #define _Page_H_030728_ 3 4 #include <string> 5 #include <map> 6 #include <vector> 7 #include <list> 8 #include "Url.h" 9 #include "list.h" 10 #include "uri.h" 11 #include "hlink.h" 12 13 14 //large enough to 阅读全文

摘要： 从今年2月开学以后就一直在业余时间看与tse相关的东西，终于到了放假的时间了，所以决定总结一下，主要是以代码为主，太理论的东西不适合我，所以接下来我要贴上我阅读过程中的tse的所有代码，以及各种渠道获得的注释，由于有一段时间不看了，我争取每天更新一个模块。源代码http://net.pku.edu.cn/~webg/src/TSE/下面是所有的模块，会逐步完善。模块名称文件链接CStrFunstrfun.h strfun.cpphttp://www.cnblogs.com/kakamilan/archive/2012/07/01/2571973.htmlCPagepage.h page.cpp 阅读全文

摘要： 1 #ifndef _STR_FUN_H_030802 2 #define _STR_FUN_H_030802 3 4 #include <string> 5 #include <sstream> 6 #include <iostream> 7 #include <algorithm> 8 9 using namespace std;10 11 class CStrFun12 {13 public:14 CStrFun();15 virtual ~CStrFun();16 //把类中的函数都定义成静态函数，这样相当于在编译时就分配了空间，这样不需 阅读全文