Hacker News Digest

Polars Cloud GA и Distributed в бета
Polars Cloud теперь доступен в AWS, а распределённый движок — в открытой бете. Запуск удалённых запросов:

import polars_cloud as pc, polars as pl
with pc.ComputeContext(...) as ctx:
    df = (pl.scan_parquet("s3://...")
          .filter(...)
          .group_by(...)
          .remote(ctx).distributed().execute())

Что это даёт

• Единый API: ноутбук → облако без переписывания кода.
• Горизонтальное, вертикальное и «диагональное» масштабирование: от кластера до одного мощного узла без shuffle-оверхеда.
• Под капотом — OSS streaming-движок Polars.

Что уже работает

• PDS-H полностью распределённо.
• Комбинируем partitionable-запросы с order-dependent операциями (пример с group_by_dynamic + join_asof).

Скоро

• On-prem версия: первые клиенты через пару месяцев.
• Живая панель кластера.