1. python:mysql插入和查詢數據
在Python中操作MySQL資料庫,實現數據的插入和查詢是常見需求。首先,需要確保MySQL服務已經安裝並且與Python環境兼容。
插入數據時,使用SQL命令結合MySQL連接進行操作。基本語法為:
INSERT INTO table_name (column1, column2, ...) VALUES (value1, value2, ...);
其中,table_name代表表名,column1, column2等為表中欄位名,value1, value2等為對應欄位的值。
在Python中,使用`mysql-connector-python`庫實現數據的插入。示例代碼如下:
python
import mysql.connector
cnx = mysql.connector.connect(user='username', password='password',
host='hostname',
database='database_name')
cursor = cnx.cursor()
query = ("INSERT INTO table_name "
"(column1, column2, ...) "
"VALUES (%s, %s, ...)")
data = (value1, value2, ...)
cursor.execute(query, data)
cnx.commit()
cursor.close()
cnx.close()
查詢數據同樣通過MySQL連接進行,基本語法如下:
SELECT * FROM table_name;
使用Python進行查詢時,可以利用`cursor.execute()`執行SQL查詢,根據查詢結果進行數據處理。示例代碼如下:
python
query = "SELECT * FROM table_name"
cursor.execute(query)
result = cursor.fetchall() # 獲取所有數據
cursor.close()
cnx.close()
在處理數據時,若在終端中查詢發現漢字顯示為問號,可能是因為編碼問題。確保MySQL和連接庫支持UTF-8編碼,執行如下命令解決編碼問題:
bash
ALTER DATABASE database_name CHARACTER SET = utf8mb4 COLLATE = utf8mb4_unicode_ci;
在Python中查詢數據時,可以使用`fetchall()`, `fetchone()`, `fetchmany()`等方法,根據需要獲取數據。如:
python
result = cursor.fetchall() # 獲取所有數據
result = cursor.fetchone() # 獲取第一條數據
result = cursor.fetchmany(10) # 獲取10條數據
在查詢數據時,可以使用`WHERE`和`LIMIT`進行條件查詢和數據分頁。例如:
python
query = "SELECT * FROM table_name WHERE column_name = 'value' LIMIT 5"
cursor.execute(query)
result = cursor.fetchall()
至此,MySQL數據表中的數據插入和查詢操作完成。確保Python環境與MySQL服務兼容,使用正確的庫進行連接和操作,以實現數據的高效管理。
2. Python連接mysql資料庫及python使用mysqldb連接資料庫教程
做python的時候需要用到資料庫,於是自己重新整理了一下資料庫的知識,並且熟悉了python中MysqlDB模塊的功能和函數等介面,現在系統地來總結一下吧:
首先你要做的還是下載相應的模塊並且安裝啦,下載地址自己搜,網上有很多,安裝的話也很好辦,安裝之後python的安裝目錄下的Lib文件夾下的site-packages文件夾下的MySQLdb文件夾,這之中存放的便是該模塊的定義。准備工作做好之後我們需要在源碼中import MySQLdb
資料庫的連接:
模塊引入之後我們就需要和資料庫進行連接了,實例代碼如下:
db = MySQLdb.connect("localhost","root","123456","myciti" )
這三個關鍵參數的含義一目瞭然:第一個為伺服器的地址,第二個為用戶名,第三個為dbms密碼,第四個為要訪問的資料庫,其實該connect函數的參數不止這些,不過由於其有默認值而且大多數情況下不用修改,因而省略了。這里做如下列表:
host,連接的資料庫伺服器主機名,默認為本地主機(localhost)。
user,連接資料庫的用戶名,默認為當前用戶。
passwd,連接密碼,沒有默認值。
db,連接的資料庫名,沒有默認值。
conv,將文字映射到Python類型的字典。默認為MySQLdb.converters.conversions
cursorclass,cursor()使用的種類,默認值為MySQLdb.cursors.Cursor。
compress,啟用協議壓縮功能。
named_pipe,在windows中,與一個命名管道相連接。
init_command,一旦連接建立,就為資料庫伺服器指定一條語句來運行。
read_default_file,使用指定的MySQL配置文件。
read_default_group,讀取的默認組。
unix_socket,在unix中,連接使用的套接字,默認使用TCP。
port,指定資料庫伺服器的連接埠,默認是3306
大家可能會注意到源碼中沒有用到埠號,這是因為MySQLdb的connect函數的該參數的默認值便是3306,如果你在安裝mysql的時候修改了資料庫的埠號,那麼你就需要在源碼中加上該參數的修改值了。
一,安裝mysql
如果是windows 用戶,mysql 的安裝非常簡單,直接下載安裝文件,雙擊安裝文件一步一步進行操作即可。
linux 下的安裝可能會更加簡單,除了下載安裝包進行安裝外,一般的linux 倉庫中都會有mysql ,我們只需要通過一個命令就可以下載安裝:
Ubuntudeepin
>>sudo apt-get install mysql-server
>>Sudo apt-get install mysql-client
centOS/redhat
>>yum install mysql
二,安裝MySQL-python
要想使python可以操作mysql 就需要MySQL-python驅動,它是python 操作mysql必不可少的模塊。
下載地址:https://pypi.python.org/pypi/MySQL-python/
下載MySQL-python-1.2.5.zip 文件之後直接解壓。進入MySQL-python-1.2.5目錄:
>>python setup.py install
三,測試
測試非常簡單,檢查MySQLdb 模塊是否可以正常導入。
fnngj@fnngj-H24X:~/pyse$ python
Python 2.7.4 (default, Sep 26 2013, 03:20:56)
[GCC 4.7.3] on linux2
Type "help", "right", "credits" or "license" for more information.
>>> import MySQLdb
沒有報錯提示MySQLdb模塊找不到,說明安裝OK ,下面開始使用python 操作資料庫之前,我們有必要來回顧一下mysql的基本操作:
四,mysql 的基本操作
$ mysql -u root -p (有密碼時)
$ mysql -u root (無密碼時)
mysql> show databases; // 查看當前所有的資料庫
+--------------------+
| Database |
+--------------------+
| information_schema |
| csvt |
| csvt04 |
| mysql |
| performance_schema |
| test |
+--------------------+
6 rows in set (0.18 sec)
mysql> use test; //作用與test資料庫
Database changed
mysql> show tables; //查看test庫下面的表
Empty set (0.00 sec)
//創建user表,name 和password 兩個欄位
mysql> CREATE TABLE user (name VARCHAR(20),password VARCHAR(20)); Query OK, 0 rows affected (0.27 sec)
//向user表內插入若干條數據
mysql> insert into user values('Tom',');Query OK, 1 row affected (0.05 sec)
mysql> insert into user values('Alen',');Query OK, 1 row affected (0.08 sec)
mysql> insert into user values('Jack',');Query OK, 1 row affected (0.04 sec)
//查看user表的數據
mysql> select * from user;+------+----------+
| name | password |
+------+----------+
| Tom | 1321 |
| Alen | 7875 |
| Jack | 7455 |
+------+----------+
3 rows in set (0.01 sec)
//刪除name 等於Jack的數據
mysql> delete from user where name = 'Jack'Query OK, 1 rows affected (0.06 sec)
//修改name等於Alen 的password 為 1111
mysql> update user set password=' where name = 'Alen'Query OK, 1 row affected (0.05 sec)
Rows matched: 1 Changed: 1 Warnings: 0
//查看錶內容
mysql> select * from user;+--------+----------+
| name | password |
+--------+----------+
| Tom | 1321 |
| Alen | 1111 |
+--------+----------+
3 rows in set (0.00 sec)
五,python 操作mysql資料庫基礎
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#創建數據表#cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")#插入一條數據#cur.execute("insert into student values(ƈ','Tom',Ɖ year 2 class',Ə')")#修改查詢條件的數據#cur.execute("update student set class=Ɖ year 1 class' where name = 'Tom'")#刪除查詢條件的數據#cur.execute("delete from student where age=Ə'")cur.close()
conn.commit()
conn.close()
>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd=',db ='test',)
Connect() 方法用於創建資料庫的連接,裡面可以指定參數:用戶名,密碼,主機等信息。
這只是連接到了資料庫,要想操作資料庫需要創建游標。
>>> cur = conn.cursor()
通過獲取到的資料庫連接conn下的cursor()方法來創建游標。
>>> cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")
通過游標cur 操作execute()方法可以寫入純sql語句。通過execute()方法中寫如sql語句來對數據進行操作。
>>>cur.close()
cur.close() 關閉游標
>>>conn.commit()
conn.commit()方法在提交事物,在向資料庫插入一條數據時必須要有這個方法,否則數據不會被真正的插入。
>>>conn.close()
Conn.close()關閉資料庫連接
六,插入數據
通過上面execute()方法中寫入純的sql語句來插入數據並不方便。如:
>>>cur.execute("insert into student values(ƈ','Tom',Ɖ year 2 class',Ə')")
我要想插入新的數據,必須要對這條語句中的值做修改。我們可以做如下修改:
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#插入一條數據sqli="insert into student values(%s,%s,%s,%s)"cur.execute(sqli,(Ɖ','Huhu',ƈ year 1 class',ƍ'))
cur.close()
conn.commit()
conn.close()
假如要一次向數據表中插入多條值呢?
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#一次插入多條記錄sqli="insert into student values(%s,%s,%s,%s)"cur.executemany(sqli,[
(Ɖ','Tom',Ƈ year 1 class',ƌ'),
(Ɖ','Jack',ƈ year 1 class',ƍ'),
(Ɖ','Yaheng',ƈ year 2 class',ƍ'),
])
cur.close()
conn.commit()
conn.close()
executemany()方法可以一次插入多條值,執行單挑sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數。
七,查詢數據
也許你已經嘗試了在python中通過
>>>cur.execute("select * from student")
來查詢數據表中的數據,但它並沒有把表中的數據列印出來,有些失望。
來看看這條語句獲得的是什麼
>>>aa=cur.execute("select * from student")
>>>print aa
5
它獲得的只是我們的表中有多少條數據。那怎樣才能獲得表中的數據呢?進入python shell
>>> import MySQLdb>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd=',db ='test',)>>> cur = conn.cursor()>>> cur.execute("select * from student")5L
>>> cur.fetchone()
(1L, 'Alen', Ƈ year 2 class', ƌ')>>> cur.fetchone()
(3L, 'Huhu', ƈ year 1 class', ƍ')>>> cur.fetchone()
(3L, 'Tom', Ƈ year 1 class', ƌ')
...>>>cur.scroll(0,'absolute')
fetchone()方法可以幫助我們獲得表中的數據,可是每次執行cur.fetchone() 獲得的數據都不一樣,換句話說我沒執行一次,游標會從表中的第一條數據移動到下一條數據的位置,所以,我再次執行的時候得到的是第二條數據。
scroll(0,'absolute') 方法可以將游標定位到表中的第一條數據。
還是沒解決我們想要的結果,如何獲得表中的多條數據並列印出來呢?
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#獲得表中有多少條數據aa=cur.execute("select * from student")print aa#列印表中的多少數據info = cur.fetchmany(aa)for ii in info: print ii
cur.close()
conn.commit()
conn.close()
通過之前的print aa 我們知道當前的表中有5條數據,fetchmany()方法可以獲得多條數據,但需要指定數據的條數,通過一個for循環就可以把多條數據列印出啦!執行結果如下:
5(1L, 'Alen', Ƈ year 2 class', ƌ')
(3L, 'Huhu', ƈ year 1 class', ƍ')
(3L, 'Tom', Ƈ year 1 class', ƌ')
(3L, 'Jack', ƈ year 1 class', ƍ')
(3L, 'Yaheng', ƈ year 2 class', ƍ')
[Finished in 0.1s]
3. python如何訪問資料庫
1.背景:
python提供了很多資料庫介面, 常用的資料庫有 MS SQL Server /mysql /oracle 等。
打開鏈接 https://wiki.python.org/moin/DatabaseInterfaces
是python 關於資料庫介面的一個總結 , 可以看到python支持的訪問的資料庫系統。
2.模塊:
python 主要是通過模塊和資料庫連接的。
2.1 安裝模塊:
如果使用anconda,本身就會集合很多模塊,不需要手動安裝。如果用pycharm就要手動安裝模塊。
安裝模塊流程:
下載模塊擴展包放到路徑下——>cmd找到相應路徑——> pip install +擴展包名字
下面列舉一些常用連接資料庫的模塊:pymssql / sqlite3/ PyMySQL/pyodbc/odbc/adodbapi
不同模塊連接的資料庫不同, 支持的版本系統有的也不一樣。但是大體用法都是相近的, 因為有DB-API
相關推薦:《Python教程》
3.Python DB-API
3.1背景:
在沒有DB-API 之前, 不同資料庫有不同的資料庫介面程序, 這就導致python 訪問 database 的介面程序非常混亂。如果我們學習了python 訪問 mysql 的介面程序, 然後要切換到另一個資料庫上, 我們還要在學習另外一個資料庫的介面程序。python DB-API就是為了解決介面程序混亂而生成的。有了DB-API, 在不同資料庫上移植代碼就變得簡單的多了。
3.2Python DB-API:
Python 定義了一套操作資料庫的 DB-API 介面,它是一個規范,定義了一系列必須的對象和資料庫存取方式,以便為不同的底層資料庫系統提供一致的訪問介面
這個鏈接就是python 官方給定的 DB-API 的說明 https://www.python.org/dev/peps/pep-0249/
3.3 Python DB--API的內容:
連接對象:
?Connect()創建連接:host/server /user/password/db connect方法生成一個connect對象, 我們通過這個對象來訪問資料庫。符合標準的模塊都會實現connect方法。
?close():關閉連接
?commit():提交當前事務。做出某些更改後確保已經進行了提交,這樣才可以將這些修改真正地保存到database中
?rollback() 回滾上一次調用 commit()以來對資料庫所做的更改
?cursor():創建游標。系統為用戶開通的一個數據緩沖區,用於存放SQL語句執行結果。cursor游標是有狀態的,它可以記錄當前已經取到結果的第幾個記錄了,因此,一般你只可以遍歷結果集一次。在上面的情況下,如果執行fetchone()會返回為空。這一點在測試時需要注意
游標對象:
?Execute()執行一個資料庫查詢或命令。 execute 執行sql 語句之後運行的結果不會直接output 出來 , 而是放到了一個緩存區, 要用 fetch語句+print 可以查詢sql運行的結果
?fetchone ()得到結果集的下一行
?fetchmany(size)得到結果集的下幾行
?fetchall()返回結果集中剩下的所有行
?rowcount 返回影響的行數
?Close()關閉游標對象
3.4Python DB--API的工作原理及流程:
如圖所示如果把python 和資料庫比作兩個不同的地點, connection 就是路, 能連接python和database。cursor就像在路上行駛的小貨車, 可以用於執行sql 語句, 以及存儲sql 運行的結果。
流程:
4.MS SQL Server 示例:
4.1 導入模塊、創建連接:
4.2 創建游標: 游標創建之後就可以對資料庫進行查詢更改了!
4.3對數據進行操作(創建表、插入行、更新數據、增加列、刪除行、列、表):
4.4 查詢 獲取行:
5.其他:
使用游標的時候要注意, 每次連接只能有一個游標查詢處於活躍狀態。 code演示:
execute()循環和 executemany() 插入100000 條數據測速: