网络爬虫—MySQL基础
前言：
????️????️个人简介：以山河作礼。
????️????️:Python领域新星创作者，CSDN实力新星认证
????????第一篇文章《1.认识网络爬虫》获得全站热榜第一，python领域热榜第一。
???? ????第四篇文章《4.网络爬虫—Post请求(实战演示)》全站热榜第八。
???? ????第八篇文章《8.网络爬虫—正则表达式RE实战》全站热榜第十二。
????????《Python网络爬虫》专栏累计发表八篇文章，上榜三篇。欢迎免费订阅！欢迎大家一起学习，一起成长！！
????????悲索之人烈焰加身，堕落者不可饶恕。永恒燃烧的羽翼，带我脱离凡间的沉沦。
MySQL安装教程
安装教程本章节就不在演示，有需要可以点这里:
mysql安装教程【安装版】
MySQL登录
按住win+R 然后输出cmd，接着按回车
在这里我们需要输入我们安装数据库时的数据库名称和密码：
格式：mysql -h 主机名 -u 用户名 -p 密码
出现这些代码，就说明数据库安装成功了，可以正常使用了。
Mysql数据库操作
显示数据库
show databases;
创建数据库
CREATE DATABASE <数据库名>;
创建一个名为demo的数据库：
删除数据库
drop database <数据库名>;
查询数据库
show databases;
使用数据库
use <数据库名>;
Mysql数据类型
| 数值类型 | int :4个字节integer:与int同义词float :4个字节double:8个字节 |
|---|---|
| 字符串类型 | char:固定长度字符串varchar: 可变长度字符串 |
| 日期/时间类型 | Date:YYYY-MM-DDDatetime:YYYY-MM-DD HH:MM:SSTime:HH:MM:SS |
Mysql数据表创建
| 功能 | 命令 |
|---|---|
| 创建表 | create table movie_table(title varchar(255) NOT NULL,p1 float(22),date datetime,PRIMARY KEY (title))DEFAULT CHARSET=utf8; |
| 删除表 | DROP TABLE table_name ; |
create table movie_table(title varchar(255) NOT NULL,p1 float(22),date datetime,PRIMARY KEY (title))DEFAULT CHARSET=utf8;
DROP TABLE movie_table ;
|
Mysql增删查改
| sql语句 | 用法 |
|---|---|
| INSERT INTO table_name ( field1, field2,…fieldN )VALUES ( value1, value2,…valueN ); | INSERT INTO SQL语法 |
| SELECT column_name,column_nameFROM table_name[WHERE Clause][LIMIT N] | 查询语句中你可以使用一个或者多个表，表之间使用逗号(,)分割，并使用WHERE语句来设定查询条件。SELECT 命令可以读取一条或者多条记录。你可以使用星号（*）来代替其他字段，SELECT语句会返回表的所有字段数据你可以使用 WHERE 语句来包含任何条件。你可以使用 LIMIT 属性来设定返回的记录数。 |
| UPDATE table_name SET field1=new-value1, field2=new-value2[WHERE Clause] | 你可以同时更新一个或多个字段。你可以在 WHERE 子句中指定任何条件。你可以在一个单独表中同时更新数据。当你需要更新数据表中指定行的数据时 WHERE 子句是非常有用的 |
| DELETE FROM table_name [WHERE Clause] | 如果没有指定 WHERE 子句，MySQL 表中的所有记录将被删除。你可以在 WHERE 子句中指定任何条件您可以在单个表中一次性删除记录。当你想删除数据表中指定的记录时 WHERE 子句是非常有用的 |
PyMysql
安装Python的MySQL库
pip install pymysql
安装Python的MySQL库
连接数据库
连接数据库成功
增添字段
接着我们为表增添字段：
先使用表:use spider001
接着为表增添字段：
create table lianjia_table(
name varchar(255) NOT NULL,
score varchar(255) NOT NULL,
number varchar(255) NOT NULL,
introdu varchar(255) NOT NULL,
primary key(name)
)DEFAULT CHARSET=utf8;
创建表的SQL语句，表名为lianjia_table，包含四个字段：name、score、number、introdu。其中，name、score、number、introdu的数据类型均为varchar(255)，且均不能为空（NOT
NULL）。表的主键为name。最后，表的字符集为utf8。
操作游标
cursor = db.cursor()# 操作游标
创建了一个操作游标对象cursor，用于执行数据库操作。游标是用于遍历和操作结果集的数据库对象。通过游标，可以执行查询、插入、更新、删除等操作，并获取执行结果。执行数据库操作时，需要使用游标对象来执行SQL语句，并获取执行结果。
PyMysql插入
data1,data2,data3 =2,'孜然','None'
# SQL 插入语句
sql = """INSERT INTO url_data(
url_id,
url_title,
url_author)
VALUES (%s,%s,%s)"""
try:
# 执行sql语句
cursor.execute(sql,(data1,data2,data3))
# 提交到数据库执行
db.commit()
print('成功')
except Exception as e:
# 如果发生错误则回滚
db.rollback()
print(f'失败{e}')
- 第一行代码定义了三个变量 data1、data2 和 data3，分别赋值为 2、‘孜然’ 和 ‘None’。
- 第三行代码定义了一个 SQL 插入语句，该语句向名为 url_data 的表中插入一条数据，包括三个字段：url_id、url_title和 url_author。
- 第六行代码通过 cursor.execute() 方法执行 SQL 插入语句，并将 data1、data2 和 data3作为参数传入。这里使用了占位符 %s，这是 MySQLdb模块的写法，表示后面会传入一个元组，元组中的每个值将替换一个占位符。注意，元组中的数据类型必须与 SQL 语句中要插入的数据类型一致。
- 第八行代码通过 db.commit() 方法提交事务，将数据插入数据库中。如果这一步出现问题，可以通过 db.rollback()方法回滚事务，撤销之前的所有操作。
- 最后一行代码输出执行结果，如果成功则打印“成功”，如果失败则打印“失败”以及具体的错误信息。
PyMysql查询
# SQL 查询语句
sql = "SELECT * FROM url_data WHERE url_id = 1"
try:
# 执行SQL语句
cursor.execute(sql)
# 获取所有记录列表
results = cursor.fetchall()
print(results)
except:
print("Error: unable to fetch data")
- 第一行代码定义了一个 SQL 查询语句，该语句从名为 url_data 的表中查询所有 url_id 等于 1 的记录。
- 第三行代码通过 cursor.execute() 方法执行 SQL 查询语句，没有传入参数，因为该语句不需要占位符。
- 第五行代码通过 cursor.fetchall() 方法获取所有查询结果，并将其保存在 results 变量中。注意，该方法只能在查询结果集不为空的情况下使用，否则会抛出异常。
- 最后一行代码输出查询结果。如果查询成功，则会打印所有符合条件的记录，每条记录都是一个元组，元组中的每个值对应一列数据。
PyMysql更新
# 更新
"UPDATE url_data SET url_title = '香蕉' WHERE url_id = 1;"
- 第一行代码定义了一个 SQL 更新语句，该语句将名为 url_data 的表中 url_id 等于 1 的记录的 url_title 字段更新为 ‘香蕉’。
- 第二行代码执行 SQL 更新语句，没有使用任何参数，因为该语句不需要占位符。
PyMysql删除
# 删除
"DELETE FROM url_data WHERE url_title = '香蕉'"
- 第一行代码定义了一个 SQL 删除语句，该语句将名为 url_data 的表中 url_title 等于 '香蕉' 的记录删除。
- 第二行代码执行 SQL 删除语句，没有使用任何参数，因为该语句不需要占位符。
写在最后：
???? ????实战演示部分可能存在违规，就不在这里展示。本章节的数据库使用写的也不是很详细，仅作学习笔记使用，如有错误，欢迎指正。