我目前正在尝试将一个没有任何标题的大csv文件（50GB）导入pyarrow表，其总体目标是将此文件导出为Parquet格式，并进一步在Pandas或Dask DataFrame中处理它。我如何在pyarrow中为csv文件指定列名和列类型？

我已经考虑过将标题附加到csv文件中。这会强制对文件进行完全重写，这看起来像是不必要的开销。据我所知，pyarrow提供了模式来定义特定列的dtype，但是文档缺少一个在将csv文件转换为箭头表时这样做的具体示例。

想象一下，这个csv文件只是一个简单的示例，即“A”和“B”两列。我当前的代码如下所示：

import numpy as np
import pandas as pd
import pyarrow as pa
df_with_header = pd.DataFrame({'col1': [1, 2], 'col2': [3, 4]})

print(df_with_header)
df_with_header.to_csv("data.csv", header=False, index=False)

df_without_header = pd.read_csv('data.csv', header=None)
print(df_without_header)
opts = pa.csv.ConvertOptions(column_types={'A': 'int8',
                                            'B': 'int8'})

table = pa.csv.read_csv(input_file = "data.csv", convert_options = opts)
print(table)

如果我打印出最终的表格，它不会改变列的名称。

pyarrow.Table
1: int64
3: int64

现在如何更改加载的列名和dtype？例如，是否也可以传入包含名称及其dtype的cript？