05 2021 档案
实时数仓和离线数仓的概念
摘要:1、数据仓库的发展趋势 1.1数据仓库的趋势 关于数据仓库的概念就不多介绍了。 数据仓库是伴随着企业信息化发展起来的,在企业信息化的过程中,随着信息化工具的升级和新工具的应用,数据量变的越来越大,数据格式越来越多,决策要求越来越苛刻,数据仓库技术也在不停的发展。 数据仓库的趋势: 实时数据仓库以满足 阅读全文
posted @ 2021-05-03 16:44 桌子哥 阅读(5827) 评论(0) 推荐(1) 编辑
运维数据提取与可视化
摘要:项目在实际的运行过程中需要对硬件的情况进行一个实时的统计与监测,但是有的系统会自带有一些可视化页面或功能,或者是针对某一项或某几项指标进行可视化,但是如果需要对数据进行针对性的可视化则需要进行相应的设计。 在本次的案例中,针对某系统中项目的实际情况进行数据的提取与可视化。 例如原始数据如下所示: 第 阅读全文
posted @ 2021-05-02 19:06 桌子哥 阅读(289) 评论(0) 推荐(0) 编辑
大数据获取案例:Scrapy+Selenium+BeautifulSoup获取中国银行外汇数据
摘要:中国银行作为权威的外汇数据提供方,获取中国银行提供的外汇数据可以有助于进行下一步的分析与预测。 在本次的项目中,使用Scrapy+Selenium+BeautifulSoup来获取中国银行的外汇数据并且保存到MySQL数据库中。 第一步:分析中国银行的网站 打开Chrome浏览器,搜索“中国银行”, 阅读全文
posted @ 2021-05-02 18:50 桌子哥 阅读(919) 评论(2) 推荐(0) 编辑