2012年12月27日
摘要：
Memcached概念： Memcached是一个免费开源的，高性能的，具有分布式对象的缓存系统，它可以用来保存一些经常存取的对象或数据，保存的数据像一张巨大的HASH表，该表以Key-value对的方式存在内存中。官网下载地址： http://www.memcached.org/运行环境： linux，BSD，windows都可跑协议理论：http://code.sixapart.com/svn/memcached/trunk/server/doc/protocol.txt （英文）操作流程：1、检查客户端的请求数据是否在memcached中，如有，直接把请求数据返回，不再对数据库进行任何操 阅读全文
摘要：
1、启动Memcache 常用参数-p <num> 监听的TCP端口(默认: 11211)-U <num> UDP监听端口 (默认: 11211, 0 时关闭)-d 以守护进程方式运行-u <username> 运行运行 Memcached的账户 非root用户-m <num> 最大的内存使用单位是MB 默认是64MB-c <num> 软连接数量默认是1024-v 输出警告和错误信息-vv 打印客户端的请求和返回信息-h 打印帮助信息-i 打印memcached和libevent的版权信息-l <ip_addr> 绑定地址 阅读全文
摘要：
Memcached是一个高效的分布式内存cache，了解memcached的内存管理机制，便于我们理解memcached，让我们可以针对我们数据特点进行调优，让其更好的为我所用。这里简单谈一下我对memcached的内存管理的一些认识，在没有特别注明的情况下，这里谈到的memcached是1.2版本，1.1和1.2版本有一些差异。基本概念：Slab和chunk在Memcached内存结构中有两个非常重要的概念：slab 和 chunk，我们先从下图中对这两个概念有一个感性的认识：图1 memcached内存结构Slab是一个内存块，它是memcached一次申请内存的最小单位。在启动memca 阅读全文
摘要：
一，什么负载均衡一个新网站是不要做负载均衡的，因为访问量不大，流量也不大，所以没有必要搞这些东西。但是随着网站访问量和流量的快速增长，单台服务器受自身硬件条件的限制，很难承受这么大的访问量。在这种情况下，有二种方案可以选择：1，对单台服务器的硬件进行更新，由双核的变成四核的，内存加大等。2，增加服务器的台数，来分担服务器的负担。以实现增加网络带宽，增加服务器的处理能力的目的。第一种方法可以理解为纵向发展，这种方法总是有限。第二种方法才是解决问题的正确选择实现负载均衡的方法，大至分为二个方向，一种是用软件来实现负载均衡，另一种是硬件实现负载均衡（包括结合硬件和软件）用软件来实现负载均衡，实现负载 阅读全文
摘要：
前段时间趁空把《大规模web服务开发技术》这本书看完了，今天用一下午时间重新翻了一遍，把其中的要点记了下来，权当复习和备忘。由于自己对数据压缩、全文检索等还算比较熟，所以笔记内容主要涉及前5章内容，后面的零星记了一些。本文可能对如下人士比较有帮助：1、对这本书有兴趣，但对内容存疑的；2、对大规模Web服务有一定经验的，可对照着查漏补缺。Hatena的规模(2010年4月)注册用户150w，UU1900w/月请求数：几十亿/月繁忙时流量：850Mbps（不含图像）硬件（服务器）600台，通过虚拟化技术，主机超过1300台日志每天几GB级别，数据库GB到TB级别系统增长的战略最小化开端、预见变化的 阅读全文
摘要：
mysql的sql语句优化都使用explain，但是这个没有办法知道详细的Memory/CPU等使用量MySQL Query Profiler, 可以查询到此 SQL 语句会执行多少, 并看出 CPU/Memory 使用量, 执行过程 System lock, Table lock 花多少时间等等.mysql> show variables like 'profiling%';+------------------------+-------+| Variable_name | Value |+------------------------+-------+| prof 阅读全文
摘要：
之前写过一个篇【HTTP协议详解】，这次介绍代理服务器， 代理服务器是HTTP协议中一个重要的组件， 发挥着重要的作用。 本文介绍一些HTTP代理服务器的概念和工作原理阅读目录什么是代理服务器Fiddler就是个典型的代理代理作用一：FQ代理作用二：匿名访问代理作用三：通过代理上网代理作用四：通过代理缓存，加快上网速度代理作用五：儿童过滤器IE代理设置：手动设置代理IE代理设置：使用自动配置脚本(PAC)IE代理设置：自动探测设置(WPAD)代理认证，407状态码使用代理服务器的安全问题如何搭建代理服务器什么是代理服务器Web代理（proxy）服务器是网络的中间实体。 代理位于Web客户端和W 阅读全文
摘要：
之前写过一个篇【HTTP协议详解】，这次继续介绍HTTP协议中的压缩。本文会使用Fiddler来查看HTTP request和Response, 如果不熟悉这个工具，可以先参考[Fiddler教程]HTTP压缩是指: Web服务器和浏览器之间压缩传输的”文本内容“的方法。 HTTP采用通用的压缩算法，比如gzip来压缩HTML,Javascript, CSS文件。 能大大减少网络传输的数据量，提高了用户显示网页的速度。当然，同时会增加一点点服务器的开销。 本文从HTTP协议的角度，来理解HTTP压缩这个概念。阅读目录HTTP内容编码和HTTP压缩的区别HTTP压缩的过程实例：用Fiddler观 阅读全文
摘要：
http协议是无状态的， 浏览器和web服务器之间可以通过cookie来身份识别。 桌面应用程序(比如新浪桌面客户端， skydrive客户端)跟Web服务器之间是如何身份识别呢？阅读目录什么是HTTP基本认证HTTP基本认证的过程HTTP基本认证的优点每次都要进行认证HTTP基本认证和HTTPS一起使用就很安全HTTP OAuth认证其他认证客户端的使用什么是HTTP基本认证桌面应用程序也通过HTTP协议跟Web服务器交互， 桌面应用程序一般不会使用cookie, 而是把 "用户名+冒号+密码"用BASE64算法加密后的字符串放在http request 中的header 阅读全文