Pandas.read_csv 将所有文件读取到一列中

Pandas库读取多个文件并合并为一列

python
import pandas as pd
import numpy as np
import os

python
file_dir = 'path/to/files'  # 文件路径
file_list = os.listdir(file_dir)  # 获取文件列表
data = pd.DataFrame()  # 创建空的DataFrame对象
for file in file_list:
    file_path = os.path.join(file_dir, file)  # 拼接文件路径
    df = pd.read_csv(file_path)  # 读取文件为DataFrame对象
    data = pd.concat([data, df], axis=0)  # 合并为一列
data.reset_index(drop=True, inplace=True)  # 重置索引

python
# 数据清洗
data.dropna(inplace=True)  # 删除缺失值
data.drop_duplicates(inplace=True)  # 删除重复值
# 特征提取
data['year'] = pd.to_datetime(data['date']).dt.year  # 提取日期的年份
# 统计计算
total_sales = data['sales'].sum()  # 计算销售总额
average_price = data['price'].mean()  # 计算平均价格