下士闻道

摘要： 什么是索引，索引是一张表，记录了表单列或者某几列的表，减少查询量。 阅读全文

摘要： 硬件层面 内存要大，最好是ECC（Error Checking and Correcting），实现内存的动态纠错；CPU要多路（每个路彼此隔离）每个路一个CPU，每个cpu上面一般都是2~12核。 在操作系统层面 1）JVM用64位的； 2）挂载的硬盘设置为noatime，atime意味着每次读写 阅读全文

摘要： 在spring4下面使用的是ServletContext作为容器，这个是servlet规范里面设置的；加载了默认的servlet（在spring 4之前都是web.xml中做的），但是在spring 4使用基于约定默认都是使用org.springframework.web.servlet.Dispa 阅读全文

摘要： Spark在运算过程中提供了一套完整的机制用来提高效率。 1. 用于收集信息的Accumulator，自带增量，用于spark全局收集数据；共享数据； 2. 用于提高传输速率的broadcast机制；如果需要将已知大对象比如上万条的List，这些多大几十M甚至更大对象如果传统作为Map对象的方式下放 阅读全文

摘要： 因为要和老系统集成zipkin，意外的发现老系统使用的httpClient来发送信息。zipkin的官方demo可都是retstTemplate啊！有的搞头。 在看Demo的时候意外的发现其实其实2.5是支持httpClient的，只有到了spring 3之后才是restTemplate；但是我移植 阅读全文

摘要： 为什么使用了httpclient，客户端没有向zipkin server发送日志？ 因为我实在main方法中调用的，完事后这个线程就没了；httpclient用的还是异步的发送日志方式；所以没发日志。 但是现在卡主我的确实为什么只有client的信息，没有server信息！ 应该还是进程被干掉的原因 阅读全文

摘要： 发现全是springcloudapp的名称，然后是springcloudapp（http://localhost:8080/hello/tom）工程单独调用并没有通知zipkin； 原来是因为restTemplate的获取，好用的是使用restTemplate的@autowire的方式，但是如果使用 阅读全文

摘要： mysql设定 1. 创建表结构： （源码路径）\zipkin-storage\mysql\src\main\resources\mysql.sql 2. zipkin的存储设置为mysql（collector设置为kafka） java -server -jar zipkin-server-2.6 阅读全文

摘要： 1. 一般是先开电脑，后开打印机会发生这类情况；可以选择重启机器，之后就好了。 2. 或者选择在控制面板里面删掉打印机；然后再重新添加一遍即可（添加一遍也要添加一会儿，因为每次添加都要安装驱动）。重新添加如果现实下面的错误 则需要在服务（services.msc）中将printer spooler服 阅读全文

摘要： Spark在master node生成DAG之后，将DAG以及map函数，action函数进行打包，还有一个很重的打包内容：如何在worker节点执行。统统打包之后传递给YARN，YARN本身只是负责分配资源，以及将上游应用要执行的内容（spark打的函数包）放在分配的资源里面执行；执行内容他并不知 阅读全文