Fixtures para ingesta por lotes
Fixtures Parquet, Avro, SQLite, NDJSON y CSV para staging ETL, cargas en warehouse y validacion de ingesta masiva.
3
Por que importa este flujo de trabajo
6
Archivos
Use workflow pages to move from a job to the exact fixtures, packs, and supporting references.
Por que importa este flujo de trabajo
About This Workflow
- Mezcla parquet columnar, avro con schema, datos de staging en SQLite y archivos planos de control en una sola suite.
- Util para validar loaders batch, jobs de staging y la orquestacion de imports a warehouse.
- Anclado a packs que inician suites de ETL e importacion a warehouse con una descarga.
Packs recomendados
Fixture Packs
Paquete de fixtures para validacion ETL
Paquete de fixtures para importacion en warehouse
Matrices de fixtures
Fixture Matrices
Matriz de fixtures para ingesta de Parquet
Matriz de fixtures Avro para schema
SQLite Local Database Fixture Matrix
Matriz de fixtures NDJSON para webhooks
Fixtures sugeridos
Files
| Nombre de archivo | Formato | Tamano | Acciones |
|---|---|---|---|
|
parquet_alltypes_plain_sample.parquet
|
PARQUET | 1.8 KB | |
|
parquet_list_columns_sample.parquet
|
PARQUET | 2.5 KB | |
|
avro_user_events_sample.avro
|
AVRO | 501 B | |
|
sqlite_batch_ingestion_sample.sqlite
|
SQLITE | 12.0 KB | |
|
ndjson_api_activity_stream_sample.ndjson
|
NDJSON | 313 B | |
|
csv_wide_table_sample.csv
|
CSV | 1.6 KB |
Paginas de estrategia relacionadas