數據說明:
一月份各省銷售數據:csv格式
二月份各省銷售數據:json格式
實現要求:將兩個文件中的數據存儲到數據庫中,并反向從數據庫中讀取數據存儲為json格式文件
本文提供數據
完成案例所需基礎
【Python】基礎知識(函數與數據容器)
【Python】JSON與jsonpath
【Python】文件操作
【Python】模塊和包
【Python】面向對象
【MySQL】基礎操作(DDL,DML,DCL,DQL)
【Python】操作MySQL基礎使用
案例實現
先在數據庫中創建表,依次輸入執行以下sql語句
create database py_sql charset utf8;
use py_sql;
create table orders(order_date date,order_id varchar(255),money int,province varchar(10)
);
Data_define.py
# 數據定義的類class Record:def __init__(self, date, order_id, money, province):self.date = date # 訂單日期self.order_id = order_id # 訂單idself.money = money # 訂單金額self.province = province # 銷售省份def __str__(self):return f"{self.date},{self.order_id},{self.money},{self.province}"
File_define.py
# 和文件相關的類定義
import jsonfrom Data_define import Record
# 先定義一個抽象類用來做頂層設計,確定有哪些功能需要實現
class FileReader:def read_data(self) -> list[Record]:# 讀取文件的數據,讀到的每一條數據都轉換為Record對象,將它們都封裝到list內返回即可passclass TextFileReader(FileReader):def __init__(self,path):self.path = path # 定義成員變量記錄文件的路徑# 復寫(實現抽象方法)def read_data(self) -> list[Record]:f = open(self.path, 'r', encoding="UTF-8")record_list: list[Record] = []for line in f.readlines():line = line.strip() # 消除讀取到的每一行數據中的\ndata_list = line.split(",")record = Record(data_list[0], data_list[1], int(data_list[2]), data_list[3])record_list.append(record)f.close()return record_listclass JsonFileReader(FileReader):def __init__(self,path):self.path = pathdef read_data(self) -> list[Record]:f = open(self.path, 'r', encoding="UTF-8")record_list: list[Record] = []for line in f.readlines():data_dict = json.loads(line)record = Record(data_dict["date"], data_dict["order_id"], data_dict["money"], data_dict["province"])record_list.append(record)f.close()return record_listif __name__ == '__main__':text_file_reader = TextFileReader("2011年1月銷售數據.txt")json_file_reader = JsonFileReader("2011年2月銷售數據JSON.txt")list1 = text_file_reader.read_data()list2 = json_file_reader.read_data()for l in list1:print(l)for l in list2:print(l)
main.py
# 讀取文件,寫入MySQL數據庫中
from File_define import TextFileReader,JsonFileReader
from Data_define import Record
from pymysql import Connectiontext_file_reader = TextFileReader("2011年1月銷售數據.txt")
json_file_reader = JsonFileReader("2011年2月銷售數據JSON.txt")jan_data: list[Record] = text_file_reader.read_data() # 1月份數據
feb_data: list[Record] = json_file_reader.read_data() # 2月份數據
# 將2個月份的數據合并為1個list來存儲
all_data: list[Record] = jan_data + feb_dataconn = Connection(host = 'localhost',port = 3306,user = 'root',password = '123456',autocommit = True
)
cursor = conn.cursor()
conn.select_db('py_sql')
# 組織SQL語句
for record in all_data:sql = f"insert into orders(order_date, order_id, money, province)" \f"values('{record.date}','{record.order_id}',{record.money},'{record.province}')"cursor.execute(sql)conn.close()
toJson.py
# 將寫入到數據庫的數據讀取出來存儲為json格式
from pymysql import Connection
import json
conn = Connection(host = 'localhost',port = 3306,user = 'root',password = '123456',autocommit = True
)
cursor = conn.cursor()
conn.select_db('py_sql')
cursor.execute("select * from orders")
results: tuple = cursor.fetchall()
f = open('2011年1,2月銷售數據.txt','w',encoding='UTF-8')
for r in results:dict = {"date":f"{r[0]}","order_id":r[1],"money":r[2],"province":r[3]}#print(dict)data = json.dumps(dict, ensure_ascii=False)#print(data)f.write(data)f.write("\n")
f.close()
conn.close()