Vue d'ensemble

PyArrow 17.0, publié le 21 août 2024, apporte des améliorations de performance pour la lecture Parquet et les opérations de calcul.

Fonctionnalités principales

Performances

La lecture Parquet est accélérée grâce à un meilleur parallélisme et les fonctions de calcul bénéficient d'optimisations SIMD supplémentaires.

python
import pyarrow.parquet as pq
import pyarrow.compute as pc

# Lecture optimisée
table = pq.read_table('donnees.parquet')
print(f'Lignes : {table.num_rows}')

# Calcul vectorisé rapide
total = pc.sum(table.column('montant'))
print(f'Total : {total.as_py()}')

Sources