推荐项目

zookeeper3.4.10
kafka 2.11
redis-4.0.2 ps -ef |grep redis 里面有一个 说明没事
mongodb 3.4.3 27017 他的表 叫collection
scala 2.11.12

快捷键

1.如果包没有显示出来,需要自行添加,
ctrl+alt+shift+s 打开projectStructure

启动命令

bin/zkServer.sh start
bin/kafka-server-start.sh -daemon config/server.properties
bin/mongod -f data/mongodb.conf
    ps -ef |grep mongodb
    Robo 3T   小火箭

查看kafka是否成功连接和其他信息



能连接就行

注意事项

先添加支持

第二步

pom

pom.xml 最外层的都是放 日志 dependency
pluginManagement management只要有这个,就说明,子类在调用他的时候可以不用写版本号。
共用依赖

有的时候 模块之间相互调用不成功,点maven中的项目名字下,install 给他安装一下。

scala中调用其他函数

sql语句:逗号表示一级

有找最热门的电影sql看一看

关于类别
可以直接这种,但是容易oom,,因为会做类别上的交互,join,会特别庞大

下面这张图。代码被注释了。

笛卡尔积


协同过滤




ALS优化

物品相似度 用的 余弦相似度


flume传过来的没有时间
通过命令行传过来的 有时间

posted @ 2021-06-05 10:03  千面鬼手大人  阅读(45)  评论(0编辑  收藏  举报
// 侧边栏目录 // https://blog-static.cnblogs.com/files/douzujun/marvin.nav.my1502.css