satyrs

摘要： relational database every relation has a schema defining fields in columns a set of relations relation: a table with rows and columns schema: name of 阅读全文

摘要： data management data model , schema data model: colletion of concepets for describing data schema: using model, a description of a particular collecti 阅读全文

摘要： project 中遇到 example: .sbt .sh 阅读全文

摘要： parallelized,lazily transform,cache(),actions 算子 算子是RDD中定义的函数，可以对RDD中的数据进行转换和操作。数据转化为Spark中的数据块，RDD就是一组分区，物理上是元数据结构存储映射关系，物理对应一个block。通过BlockManager进行 阅读全文

摘要： login screen: sudo gpasswd -d $USER nopasswdlogin (just don't need pass for login screen)root pass: https://www.youtube.com/watch?v=5GeVMDQsDpcblack s 阅读全文

摘要： 地址 ：https://github.com/yuqingwang15/kafka-spark 案例实时统计每秒中男女生购物人数，因此针对每条购物日志，我们只需要获取gender即可，然后发送给Kafka，接下来Spark Streaming再接收gender进行处理。 1 应用程序将购物日志发送给 阅读全文

摘要： File->Project Structure Artifacts->绿色加号->Jar->From moduleswith dependencies... Main Class->Search by Name->Apply->OK 其他选项都删除，只保留了Name.jar以及Name compil 阅读全文

摘要： official website https://docs.scala-lang.org/tour/variances.html all codes for testing : https://github.com/yuqingwang15/scala-coding some snippets: h 阅读全文

摘要： 1 _= setters：以_=接在getter的identifier后，并紧跟参数 阅读全文

摘要： collection.IndexedSeq的一个trait immutable traitIndexedSeq[+A] extends Seq[A] with GenericTraversableTemplate[A, IndexedSeq] with IndexedSeqLike[A, Index 阅读全文