2022年4月11日
爬虫Xpath使用
摘要： Xpath使用案例 准备工作 pip install lxml 代码如下: 点击查看代码 from lxml import etree #定义字符串 wb_data = """ <div> <ul> <li class="item-0"><a href="link1.html">first item 阅读全文
posted @ 2022-04-11 21:16 N暖阳_李维宁 阅读(36) 评论(0) 推荐(0) 编辑
MySQL范式
摘要： MySQL性能优化之范式 第一范式(1NF) 数据表的每一列都要保持它的原子特性，也就是列不能再被分割。 这张表就不符合第一范式规定的原子性，不符合关系型数据库的基本要求，在关系型数据库中创建这个表的操作就不能成功。不得不将数据表设计为如下形式。 根据第一范式修改 第二范式(2NF) 属性必须完全依 阅读全文
posted @ 2022-04-11 21:11 N暖阳_李维宁 阅读(37) 评论(0) 推荐(0) 编辑
Hadoop安装部署
摘要： Hadoop伪分布式搭建 1.准备Linux环境 ①开启网络,ifconfig指令查看ip ②修改主机名为自己名字(hadoop) vim /etc/sysconfig/network NETWORKING=yes HOSTNAME=hadoop ③修改主机名和IP的映射关系 vim /etc/ho 阅读全文
posted @ 2022-04-11 21:01 N暖阳_李维宁 阅读(182) 评论(0) 推荐(0) 编辑
2022年4月3日
爬虫-用scrapy框架爬取腾讯视频完整案例
摘要： 项目介绍 这个项目我们的主题是爬腾讯视频的影片信息，包括影片名和描述 搭建项目所需环境(确保python已经安装的前提下) 打开终端一个一个安装完成即可 python -m pip install --upgrade pip pip install wheel pip install lxml pi 阅读全文
posted @ 2022-04-03 17:29 N暖阳_李维宁 阅读(2098) 评论(0) 推荐(0) 编辑
mysql事务、视图、触发器
摘要： MySQL事务 点击查看代码 #创建数据库表 create table if not exists runoob_transaction_test(id int(5))engine=innodb; select * from runoob_transaction_test; #禁止自动提交 set 阅读全文
posted @ 2022-04-03 16:46 N暖阳_李维宁 阅读(31) 评论(0) 推荐(0) 编辑
Linux自有服务
摘要： linux自有服务介绍 自有服务，即不需要用户独立去安装的软件的服务，而是当系统安装好之后就可以直接使用 的服务（内置）。 一、设置主机名 点击查看代码 ①临时主机名 # hostname lwn ②永久主机名(需要重启) # cat/etc/sysconfig/network # vim/etc/ 阅读全文
posted @ 2022-04-03 16:35 N暖阳_李维宁 阅读(116) 评论(0) 推荐(0) 编辑
2022年3月20日
Mysql子查询及索引
摘要： #建库 CREATE DATABASE IF NOT EXISTS day14 DEFAULT CHARSET UTF8; #指定库 USE day14; #建表 CREATE TABLE IF NOT EXISTS emp ( emp_id INT PRIMARY KEY AUTO_INCREME 阅读全文
posted @ 2022-03-20 22:28 N暖阳_李维宁 阅读(232) 评论(0) 推荐(0) 编辑
python爬取百度贴吧文字内容
摘要： 爬取百度贴吧文字内容 方法1: 点击查看代码 **导入urllib库** from urllib import request **导入re正则模块库** import re #指定爬取页数 url = "https://tieba.baidu.com/f?kw=%E6%AE%B5%E5%AD%90 阅读全文
posted @ 2022-03-20 22:17 N暖阳_李维宁 阅读(96) 评论(0) 推荐(0) 编辑
Shell脚本
摘要： 什么是Shell Shell 是一个用 C 语言编写的程序，它是用户使用 Linux 的桥梁。Shell 既是一种命令语言，又是一种程序设计语言。 Shell 是指一种应用程序，这个应用程序提供了一个界面，用户通过这个界面访问操作系统内核的服务。 Ken Thompson 的 sh 是第一种 Uni 阅读全文
posted @ 2022-03-20 22:02 N暖阳_李维宁 阅读(206) 评论(0) 推荐(0) 编辑
2022年3月13日
pyhon爬虫模拟网页登陆、正则表达式
摘要： 前言:不是每个网页都能模拟成功,仅供学习 模拟网页登陆 --安装模块-- pip install urllib (运行cmd输入此段代码即可安装) 点击查看代码 from urllib import request import urllib from http import cookiejar # 阅读全文
posted @ 2022-03-13 17:02 N暖阳_李维宁 阅读(156) 评论(0) 推荐(0) 编辑