会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
fzuwjy
博客园
首页
新随笔
联系
管理
订阅
2023年12月14日
综合设计——多源异构数据采集与融合应用综合实践
摘要: 这个项目属于哪个课程 2023数据采集与融合技术 (福州大学 - 福州大学计算机与大数据学院) 组名、项目简介 组名:你在跟我作队项目需求:(1)音视频转文字准确性 (2)实时性 (3)多语种支持 (4)扩展性项目目标:①搭建轻量级网站平台提供交互。②利用大模型及第三方库解析音视频及图片。③性能测试
阅读全文
posted @ 2023-12-14 20:04 熏风雪奈
阅读(54)
评论(0)
推荐(0)
2023年11月6日
数据采集实践第四次作业
摘要: 作业① 熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内容。 使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票数据信息。 候选网站:东方财富网:http://qu
阅读全文
posted @ 2023-11-06 20:34 熏风雪奈
阅读(55)
评论(0)
推荐(0)
2023年10月23日
数据采集实践第三次作业
摘要: 作业① 实验要求 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 –务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Ur
阅读全文
posted @ 2023-10-23 10:48 熏风雪奈
阅读(33)
评论(0)
推荐(0)
2023年10月8日
数据采集实践第二次作业
摘要: 作业一:爬取给定城市集的7日天气预报 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 具体代码与运行结果 具体代码 码云链接 from bs4 import BeautifulSoup from bs4 import Unicode
阅读全文
posted @ 2023-10-08 19:30 熏风雪奈
阅读(42)
评论(0)
推荐(0)
2023年9月21日
2023数据采集与融合技术实践作业一
摘要: 作业一 爬取的大学排名信息 import requests import pandas as pd from lxml import etree url='http://www.shanghairanking.cn/rankings/bcur/2020' headers = { 'cookie':'
阅读全文
posted @ 2023-09-21 16:52 熏风雪奈
阅读(50)
评论(0)
推荐(0)
公告