摘要: 1.大数据的概念 维基百科的定义: 大数据是指利用常用软件工具捕获、管理和处理数据所耗时间超过可容忍时间的数据集。 2.大数据主流技术 数据采集: 使用Flume,可进行流式日志数据的收集。 使用Sqoop可以交互关系型数据库,进行导入导出数据。 使用爬虫技术,可在网上爬取海量网页数据。 数据存储与 阅读全文
posted @ 2021-01-08 22:55 夏日的向日葵 阅读(1501) 评论(0) 推荐(0) 编辑