Data AI
v1.0.0
适用于内存中数据的高速内存DataFrame库,当pandas太慢但数据仍能放入内存时使用。支持惰性求值、并行执行和Apache Arrow后端,最适合1-100GB数据集、ETL管道和更快的pandas替代方案。对于超出内存的数据,请使用dask或vaex。
适用于内存中数据的高速内存DataFrame库,当pandas太慢但数据仍能放入内存时使用。支持惰性求值、并行执行和Apache Arrow后端,最适合1-100GB数据集、ETL管道和更快的pandas替代方案。对于超出内存的数据,请使用dask或vaex。
使用 ssh-op 辅助脚本从 1Password 获取 SSH 私钥并加载到内存中的 ssh-agent,然后执行 ssh 命令。适用于需要使用 1Password 管理的密钥连接主机、排查 ssh-op 问题,或通过配置 1Password 安全库/条目并将 SSH 主机别名添加到 ~/.ssh/config 来为新机器设置环境
用于处理超出内存大小的pandas/NumPy工作流的分布式计算。当您需要将现有的pandas/NumPy代码扩展到超出内存范围或跨集群运行时使用。最适合并行文件处理、分布式机器学习以及与现有pandas代码的集成。若需在单机上进行外存分析,请使用vaex;若需内存内高速运算,请使用polars。