我有几个笔记本,是由使用纸厂的“驱动程序”笔记本运行的。这些笔记本使用剪贴簿库将信息传达给驱动程序。然后,驱动程序将此信息作为参数传递给其他笔记本。我想使用EMR笔记本来优化此“笔记本管道”的执行效率。AWS EMR笔记本是否支持剪贴簿和造纸厂,或者我需要重构笔记本?
截至目前,不。您不能直接这样做。您可以做什么(我们在做什么)如下:
hadoop
用户在EMR主节点上创建python环境安装纸厂并与纸厂一起运行:
造纸厂s3://path/to/notebook/input.ipynb s3://path/to/notebook/output.ipynb -p param = 1
本文收集自互联网,转载请注明来源。
如有侵权,请联系[email protected] 删除。
我来说两句