下士闻道

摘要： TypeError: 'urban' has type str, but expected one of: bytes 在前面添加"b"（例如，b'urban')，或者处理为variableName.encode("utf8") Variable count_var2 already exists, 阅读全文

摘要： 其实贝叶斯算法本质是某些特征取特定特征值的情况下，指定特征的概率是多少的算法： P(feature_x=value_0|feature_1=value1,feature_2=value2,feature_3=value3)； 算法的实现就是将刚才描述的条件式转化为指定特征为指定特征值的情况下，某个特征的取某个特征值的概率是多大 =>P(feature... 阅读全文

摘要： TF的概念是Term Frequent，是一个单词出现的频率，是一个局部概念，就是这个单词在指定文件中出现的频率，公式如下： 但是呢，这个TF其实很没有说服力，比如the，a之类的频率很高，但是其实不能实现很好地分类标志，尽管可以在停用词中进行禁用，但是很多单词还是无法全部禁用干净；这个时候就引入了IDF，Inverse Document Frequent，反向文档频率（我称之为区分度公式），... 阅读全文

摘要： 终于明白了反向传播的意义。 核心要明白一个概念就是求导就是要通过构建的正向链，然后再通过反向链求导数值。 为什么要求导数值？因为要求最小值。求什么最小值？ 求的是损失函数的最小值，可以通过数值方式（倒数公式）来进行求导，也可以通反向传播的方式来求导。 为什么要求损失函数的极值？ 因为要通过损失函数的 阅读全文

摘要： 在研究神经网络的反向传播的时候，不解一点，就是修改的是神经网络的paramets，为什么影响内部的神经元（层），比如Affine层；因为除了创建的时候，使用params作为Affine层的构造函数参数之外，根本没有再使用。关系如下： 后来才发现其实python里面也是和Java一样，对于对象类型传值 阅读全文

摘要： 在谈及到Kafka的ACK之前我们要向讲一下Kafka的复制机制，为了保证Kafka的高性能，设计了分区，一个topic的分区是的数据可以分散，然后可以让更多的消费者来进行消费；避免单一分区，只能由一个消费者消费，造成串行处理，多分区本质还是实现了并行消费的机制；其实但凡是分片，很大程度上都是为了实 阅读全文

摘要： 分布式事务是分布式服务中十分重要的概念；提到分布式事务，当然首先要明白ACID，原子性，一致性，隔离性和持久性；隔离性和持久性，分布式数据已经天然满足（数据分布存储满足隔离性，每个节点的数据引擎已经实现了持久性）；分布式服务主要是想的是原子性和一致性。 那么下面就是关于原子性和一致性都是由分布式服务 阅读全文

摘要： http://ifeve.com/read-write-locks/ https://www.jianshu.com/p/f584799f1c77 阅读全文

摘要： CAS是乐观锁的一种实现。CAS是Compare And Swap的缩写，是一种高效的处理并发的机制，说他高效是因为CAS是cpu的一个指令，可以在指令层面上来进行操作（非CPU指令操作需要多个CPU指令组合才能够完成功能，所以效率有影响）；至于并发处理，是因为CAS操作首先是一个原子操作（CPU指 阅读全文

摘要： https://www.jianshu.com/p/45626f4e0fc1 https://www.zhihu.com/question/37601861 阅读全文