pandas 中的大型持久 DataFrame

使用 Pandas 处理大型持久 DataFrame 的方法

python
import pandas as pd
# 创建一个 DataFrame
data = pd.DataFrame({'A': range(1000000), 'B': range(1000000, 2000000)})
# 将 DataFrame 存储为大型持久 DataFrame
data.to_hdf('data.h5', key='data', mode='w')

python
import pandas as pd
# 从大型持久 DataFrame 中读取数据
data = pd.read_hdf('data.h5', key='data')

python
import pandas as pd
# 从大型持久 DataFrame 中读取数据
trades = pd.read_hdf('trades.h5', key='trades')

python
# 计算每只股票的平均交易量
average_volume = trades.groupby('stock')['volume'].mean()

python
import matplotlib.pyplot as plt
# 绘制柱状图
average_volume.plot(kind='bar')
plt.xlabel('Stock')
plt.ylabel('Average Volume')
plt.title('Average Volume of Stocks')
plt.show()