【黑马程序员】Python综合案例

news2025/1/12 10:51:17

文章目录

数据分析案例
- 目的
- 需求
- 数据准备
- 实践
- - 数据记录类
- 文件解析
- - 解析csv格式
  - 解析json文件
- 进行数据计算
- - 读取文件数据
  - 按日期累加数据
- 图表展示
- - 图标绘制
  - 最终效果展示

数据分析案例

目的

文件操作实践
json库使用
三方库pyecharts使用
面向对象实践
数据容器使用

需求

给定一个csv内容和json内容文件，展示对应日期的销售额到柱状图

数据准备

csv格式数据新建text_csv.txt

2024-01-01,dvhvhdsvad,123,bj
2024-01-01,dfgdsgds,543,bj
2024-01-01,dfgdy23sgds,553,hb
2024-01-01,dfgdsgdsasads,144,hb
2024-01-02,dv43dsadshvhdsvad,775,bj
2024-01-02,dvhgrsfdvhdsvad,143,bj
2024-01-02,dv43dsadshvhdsvad,643,hb
2024-01-02,dvhgrsfdvhdsvad,532,hb

新建text_json.txt

{"date":"2024-01-03","order_id":"dvhvhdsvad","money":54,"province":"bj"}
{"date":"2024-01-03","order_id":"dfgdsgds","money":543,"province":"bj"}
{"date":"2024-01-03","order_id":"dfgdy23sgds","money":43,"province":"hb"}
{"date":"2024-01-03","order_id":"dfgdsgdsasads","money":32,"province":"hb"}
{"date":"2024-01-04","order_id":"dv43dsa4dshvhdsvad","money":456,"province":"bj"}
{"date":"2024-01-04","order_id":"dvhgrsfdvhdsvad","money":865,"province":"bj"}
{"date":"2024-01-04","order_id":"dv43dsaddshvhdsvad","money":321,"province":"hb"}
{"date":"2024-01-04","order_id":"dvhgrsfdvhdsvad","money":23,"province":"hb"}

实践

数据记录类

分析给定数据，可以看出两个文件中都是有4列数据，据此定义记录类
新建data_define.py

# *_*coding:utf-8 *_*
# 记录类
class Record:
    def __init__(self, date, order_id, money, province):
        self.date = date
        self.order_id = order_id
        self.money = money
        self.province = province

    def __str__(self) -> str:
        return f'{self.date}, {self.order_id}, {self.money}, {self.province}'

文件解析

根据需求可知需要解析的文件格式有两种
- csv格式的数据是字符串使用逗号分隔
- json数据是每一条记录使用标准的json格式定义
根据面向对象的思想，我们设计抽象类然后分别使用具体的格式去重写抽象类的方法
代码示例：新建file_define.py文件

# 抽象文件阅读类
class FileReader:
    def read_file(self) -> list[Record]:
        pass

解析csv格式

使用继承的方式，继承抽象类FileReader，并重写read_file方法
主要逻辑
- 打开文件
- 挨个读取文件的每一行
- 去除每一行的换行符，根据逗号获取每一行的每一个数据
- 调用数据记录构造记录，并将其追加到记录列表中
- 关闭文件，返回记录列表

代码示例

class CsvFileReader(FileReader):
path = None

def __init__(self, path):
  self.path = path

def read_file(self) -> list[Record]:
  f = open(self.path, "r", encoding="UTF-8")
  list_record: list[Record] = []
  for line in f.readlines():
    # 去除换行
    line = line.strip()
    line = line.split(",")
    record = Record(line[0], line[1], line[2], line[3])
    list_record.append(record)
  f.close()
  return list_record

解析json文件

使用继承的方式，继承抽象类FileReader，并重写read_file方法
主要逻辑
- 打开文件
- 挨个读取文件的每一行
- 去除每一行的换行符
- 调用json.loads方法将当前行字符串转化为字典类型
- 调用数据记录构造记录，并将其追加到记录列表中
- 关闭文件，返回记录列表
代码示例

class JsonFileReader(FileReader):
    path = None

    def __init__(self, path):
        self.path = path

    def read_file(self) -> list[Record]:
        f = open(self.path, "r", encoding="UTF-8")
        list_record: list[Record] = []
        for line in f.readlines():
            # 去除换行
            line = line.strip()
            line = json.loads(line)
            record = Record(line['date'], line['order_id'], line['money'], line['province'])
            list_record.append(record)
        f.close()
        return list_record

进行数据计算

读取文件数据

分别读取csv和json格式的数据，并将数据累加到列表中

# 分别获取csv和json文件数据
csv_data = CsvFileReader("./text_csv.txt").read_file()
json_data = JsonFileReader("./text_json.txt").read_file()
all_data: list[Record] = csv_data + json_data

按日期累加数据

日期粗在则累加销售额，日期不存在则添加销售额
代码示例

# 进行数据计算
data_dict = {}
for record in all_data:
    if record.date in data_dict.keys():
        # 存在，累加销售额
        data_dict[record.date] += int(record.money)
    else:
        # 不存在，添加销售额
        data_dict[record.date] = int(record.money)

图表展示

图标绘制

调用pyecharms库将数据绘制成图标
代码示例

# 图形渲染
bar = Bar()
bar.add_xaxis(list(data_dict.keys()))
bar.add_yaxis("1-4日销售额", list(data_dict.values()), label_opts=LabelOpts(is_show=False))

# 渲染
bar.render("销售额数据.html")