如何解决python ssh netmiko pathos 客户端服务器,处理来自服务器与客户端 GIS 的文件路径
所以我在一个运行 python 脚本的 win 工作站上,用于处理非常大的 .tif 文件的 GIS。有一个 linux 服务器,我想使用它的处理能力。我已经通过 ssh 连接到服务器 (netmiko) 并设置了 pathos 多处理以在节点上运行。在小型项目上效果很好。当我放大它时,它由于工作站上的内存分配而崩溃。
我意识到工作站正在尝试将所有内容加载到内存中。
我已经在 ubuntu 服务器中映射了工作 tif 文件目录。
如何在python中调用和存储相对于服务器的文件路径,绕过工作站文件目录,并调用相对于工作节点的对象?
目前正在使用 RabbitMQ 研究 celery
解决方法
嗯,我和我的网络人员谈过,他们为我建立了一个集群来直接编码,woot woot。我认为 gRPC 也可以处理这个问题。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。