fxjwind

摘要： 部分整理。。。 什么是SQL注入？ 简单的例子， 对于一个购物网站，可以允许搜索，price小于某值的商品 这个值用户是可以输入的，比如，100 但是对于用户，如果输入，100' OR '1'='1 结果最终产生的sql， 这样用户可以获取所有的商品信息 再看个例子， 对于用户身份认证，需要输入用户 阅读全文

摘要： https://www.oreilly.com/ideas/the-world-beyond-batch-streaming-101 https://www.oreilly.com/ideas/the-world-beyond-batch-streaming-102 这篇文章，首先要说清的一个问题是，给‘Streaming’正名 What is streaming? The crux... 阅读全文

摘要： http://static.googleusercontent.com/media/research.google.com/zh-CN//pubs/archive/41378.pdf 为什么要做MillWheel？ 因为当前的其他的流式系统，无法同时满足 fault tolerance, versatility, and scalability 的需求。 Spark Streaming... 阅读全文

摘要： https://ci.apache.org/projects/flink/flink-docs-release-0.10/apis/programming_guide.html Example Program 编程的风格和spark很类似， ExecutionEnvironment -- SparkContext DataSet – RDD Transformations 这... 阅读全文

摘要： A Practical Approach to Balancing Correctness, Latency, and Cost in MassiveScale, Unbounded, OutofOrder Data Processing 这篇论文的副标题很长，说明几点: 1. 这篇文章的主要工作是，Balancing Correctness, Latency, and Cost，故它仍然不能... 阅读全文

摘要： 什么是 Siddhi？Siddhi 是一种 lightweight, easy-to-use, open source CEP（Complex Event Processing）引擎，由wso2公司开发（http://wso2.com/about/）。像绝大多数的 CEP 系统一样，Siddhi 支... 阅读全文

摘要： https://docs.wso2.com/display/CEP400/SiddhiQL+Guide+3.0#SiddhiQLGuide3.0-Window https://docs.wso2.com/display/CEP400/Inbuilt+Windows#InbuiltWindows http://wso2.com/library/articles/2013/06/understan... 阅读全文

摘要： 参考， http://data-artisans.com/high-throughput-low-latency-and-exactly-once-stream-processing-with-apache-flink/ http://www.confluent.io/blog/real-time-stream-processing-the-next-step-for-apache-flink... 阅读全文

摘要： Kafka 作为 high throughput 的消息中间件，以其性能，简单和稳定性，成为当前实时流处理框架中的主流的基础组件。 当然在使用 Kafka 中也碰到不少问题，尤其是 failover 的问题，常常给大家带来不少困扰和麻烦。 所以在梳理完 kafka 源码的基础上，尽量用通俗易懂的方式，把 Kafka 发生 failover 时的机制解释清楚，让大家在使用和运维中，做到心中有... 阅读全文

摘要： 前面已经分析过kafka server的启动过程，以及server所能处理的所有的request，即KafkaApis 剩下的，其实关键就是controller，以及partition和replica的状态机 这里先看看controller在broker server的基础上，多做了哪些初始化和failover的工作 最关键的一句， private val contr... 阅读全文