07 2021 档案
摘要:海量数据处理10题 1、海量日志数据,提取出某日访问百度次数最多的那个IP。 首先是这一天,并且是访问百度的日志中的IP取出来,逐个写入到一个大文件中。注意到IP是32位的,最多有个2^32个IP。同样可以采用映射的方法,比如模1000,把整个大文件映射为1000个小文件,再找出每个小文中出现频率最
阅读全文
摘要:nginx 正则匹配配置 目录 实际使用建议 引言 nginx location正则写法 示例: # 如果 url 含有 . , 并且 不以 do 或 action 结尾,则匹配成功。 location ~ .*\.(?!(do|action)$) { root /demo/code/webroot
阅读全文
摘要:gRPC详解 pip install grpcio pip install grpcio-toolshttps://grpc.io/docs/languages/python/quickstart/ gRPC是什么? gRPC是什么可以用官网的一句话来概括 A high-performance, o
阅读全文
摘要:Protobuf简明教程 Protobuf是什么 Protobuf实际是一套类似Json或者XML的数据传输格式和规范,用于不同应用或进程之间进行通信时使用。通信时所传递的信息是通过Protobuf定义的message数据结构进行打包,然后编译成二进制的码流再进行传输或者存储。 Protobuf的优
阅读全文