.AVRO ファイル拡張子

Avroデータファイル

開発元	Apache Software Foundation
人気度	2.7 \| 11 票

AVROファイルとは？

AVROファイルは、Apache Hadoopで使用されるオープンソースのデータシリアライズシステムであるApache Avroによって作成されたデータファイルです。コンパクトなバイナリ形式でシリアライズされたデータと、データ型を定義するJSON形式のスキーマが含まれています。AVROファイルには、データセットが大きすぎるため、Apache HadoopでApache MapReduceによって処理する際にサブセットへ分割する必要がある場合、マーカーを保存することもできます。

詳細情報

Avroは、形式に関する要件なしで構造化データ、半構造化データ、構造化データを保存および処理するために使用されるオープンソースプラットフォーム、Apache Hadoopプロジェクト内で開発されました。AvroはApache Hadoopで、永続的なデータ、またはアクセス頻度の低いデータのシリアライズ形式として利用されています。データをコンパクトなバイナリ形式で保存するため、Avro形式は非常に大規模なデータセットの交換に特に役立ちます。

注: Avroは、Apache Spark SQLからデータソースとしてアクセスすることもできます。