03 2022 档案
摘要：1 package com.reliable.service; 2 3 import com.csvreader.CsvReader; 4 import com.reliable.bean.FileDict; 5 import com.reliable.dao.ReadFile; 6 import
阅读全文
摘要：1 #将等级为DEBUG的日志信息输出到console和file这两个目的地，console和file的定义在下面的代码 2 log4j.rootLogger=DEBUG,console,file 3 #控制台输出的相关设置 4 log4j.appender.console = org.apache
阅读全文
摘要：1 package com.reliable.util; 2 import java.sql.Connection; 3 import java.sql.DriverManager; 4 import java.sql.PreparedStatement; 5 import java.sql.Res
阅读全文
摘要：中国软件杯 电力客户行为分析 图表联动echarts-demo（flask） 题目链接（可下载原始CSV数据集）：http://www.cnsoftbei.com/plus/view.php?aid=715 注：其中引用的js文件自行查找 1）完整的原始数据（elec_0） 属性含义： userid
阅读全文
摘要：1 from sklearn.linear_model import LinearRegression, SGDRegressor, Ridge, LogisticRegression 2 from sklearn.datasets import load_boston 3 from sklearn
阅读全文
摘要：
《苏菲的世界》概述与感悟 （如果您对哲学有兴趣而又恰好没有太多的时间去了解，那么您可以花几分钟的时间读一下这篇文章，也许会让您对整个哲学史有一个基本的印象和了解） 经朋友推荐阅读，我对这本书最初的了解仅限于朋友几句话的简短介绍：“这是一本有助于哲学启蒙的书籍，比较生动形象，几乎贯穿整个哲学史的内容。
阅读全文
《苏菲的世界》概述与感悟 （如果您对哲学有兴趣而又恰好没有太多的时间去了解，那么您可以花几分钟的时间读一下这篇文章，也许会让您对整个哲学史有一个基本的印象和了解） 经朋友推荐阅读，我对这本书最初的了解仅限于朋友几句话的简短介绍：“这是一本有助于哲学启蒙的书籍，比较生动形象，几乎贯穿整个哲学史的内容。
阅读全文
摘要：人工智能导论 1）人工智能：让机器像人一样具有一些能力，扩展人的智慧。 2）机器学习： 不显式编程地赋予计算机能力的研究领域。 3）AIOps： Artificial Intelligence for IT Operations，智能化运维，将人工智能应用于运维领域，基于已有的运维数据（日志、监控信
阅读全文
摘要：使用爬虫等获取实时数据+Flume+Kafka+Spark Streaming+mysql+Echarts实现数据动态实时采集、分析、展示 【获取完整源码关注公众号：靠谱杨阅读人生 回复kafka获取下载链接】 主要工作流程如下所示： 模拟随机数据，把数据实时传输到Linux虚拟机文件中。 使用Fl
阅读全文
摘要：十二、Kafka （1）Topic 1）查看当前服务器中的所有topic bin/kafka-topics.sh --bootstrap-server hadoop102:9092 --list 2）创建first topic bin/kafka-topics.sh --bootstrap-serv
阅读全文
摘要：注意代码缩进 添加执行权限 chmod +x kf.sh 1 #! /bin/bash 2 case $1 in 3 "start"){ 4 for i in hadoop102 hadoop103 hadoop104 5 do 6 echo " 启动 $i Kafka " 7 ssh $i "/o
阅读全文
摘要：1 #!/bin/bash 2 3 #1. 判断参数个数 4 if [ $# -lt 1 ] 5 then 6 echo Not Enough Arguement! 7 exit; 8 fi 9 10 #2. 遍历集群所有机器 11 for host in hadoop102 hadoop103 h
阅读全文
摘要：jpsall代码 #!/bin/bash for host in hadoop102 hadoop103 hadoop104 do echo $host ssh $host jps done 查看某个命令所在的路径 which 【命令名称】 whereis 用来查看一个命令或者文件所在的路径 whi
阅读全文
摘要：十一、Flume 1）开启Flume的监控端口 bin/flume-ng agent -c conf/ -n a1 -f job/flume-netcat-logger.conf -Dflume.root.logger=INFO,console 2）使用netcat工具向44444端口发送信号 nc
阅读全文
摘要：1 def get_words(txt): 2 seg_list = jieba.cut(txt) 3 c = Counter() 4 for x in seg_list: 5 if len(x) > 1 and x != '\r\n': 6 c[x] += 1 7 print('常用词频度统计结果
阅读全文
摘要：1 """ 2 https://club.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98&productId=100006852812&score=0&sortType=5&page=0&pageSize=
阅读全文
摘要：参考：http://dblab.xmu.edu.cn/blog/1312-2/ 总的来说，每一 个Spark Application 都是由一个 driver program 组成，这个 driver program 会运行用户的 main 方法 ，且能在集群上执行并行操作。Spark 提供了一个主
阅读全文
摘要：十、使用sbt对Scala程序进行打包并运行（Spark单机运行） 在./sparkapp 中新建文件 simple.sbt（vim ./sparkapp/simple.sbt），添加内容如下，声明该独立应用程序的信息以及与 Spark 的依赖关系： name := "Simple Project"
阅读全文
摘要：大数据Hadoop-Spark集群部署知识总结 一、启动/关闭 hadoop myhadoop.sh start/stop 分步启动： 第一步：在hadoop102主机上 sbin/start-dfs.sh 第二步：在hadoop103主机上 sbin/start-yarn.sh 分步关闭： 第一步
阅读全文
摘要：ls 命令，展示文件夹内内容 -R ：连同子目录内容一起列出来； -S ：以档案容量大小排序！ -t ：依时间排序 cd 命令 cd /root/Docements # 切换到目录/root/Docements cd ./path # 切换到当前目录下的path目录中，“.”表示当前目录 cd ..
阅读全文
浙公网安备 33010602011771号