Dask共3篇
Dask Parquet 读写与 Hive 分区布局-未完纪

Dask Parquet 读写与 Hive 分区布局

把文件、行组、Dask 计算分区与 Hive 目录分开理解,才能决定如何裁列、切分大文件、处理元数据和聚合小文件。本文合并两篇官方指南,完整说明读写及目录布局的取舍。
彩雨伞的头像-未完纪钻石会员彩雨伞7小时前
0450
把 Python 工作流转换为 Dask Delayed 任务图-未完纪

把 Python 工作流转换为 Dask Delayed 任务图

说明以 delayed 描述函数依赖、统一 compute、避免过细任务和隐式状态,以及与 Dask 分块集合协作的边界。
彩雨伞的头像-未完纪钻石会员彩雨伞8小时前
0360
用 Dask 重叠分块完成邻域计算-未完纪

用 Dask 重叠分块完成邻域计算

让每个分块先取得邻居边缘,再运行局部算子并裁去多余区域。本文完整梳理 map_overlap、边界、对齐和元数据,并解释光晕深度不足为何会改变滤波结果。
彩雨伞的头像-未完纪钻石会员彩雨伞7小时前
0240