Условие
В S3 лежит 200 ГБ событий в parquet, партиционированных по dt=YYYY-MM-DD. Нужно за период [d1, d2] посчитать DAU и среднюю длительность сессии по странам. RAM 16 ГБ.
Сценарий: чанки и Dask для агрегата по большим parquet
PythonOptimisation и big dataСредняяMiddle
Хочешь увидеть разбор?
Зарегистрируйся бесплатно — откроется развёрнутое решение этой задачи и ещё 4 на выбор.
Зарегистрироваться и увидеть разборУже есть аккаунт? Войти