Условие
Ежедневный ETL должен класть результирующий DataFrame в S3 в parquet, партиционируя по dt и country. Как сделать это надёжно и атомарно?
Сценарий: писать DataFrame напрямую в S3 (parquet, партиции)
PythonAPI и integrationСредняяMiddle
Хочешь увидеть разбор?
Зарегистрируйся бесплатно — откроется развёрнутое решение этой задачи и ещё 4 на выбор.
Зарегистрироваться и увидеть разборУже есть аккаунт? Войти