我的开源
Luigi初体验
背景
Luigi是python模块，可以创建复杂的离线作业工作流。支持处理依赖关系，工作流管理，可视化等。也支持hadoop。在github有13.4k个star，截止2020年7月2日。
初体验
安装
pip3 install luigi
运行
luigid
用浏览器打开 http://localhost:8082 可以看到可视化界面。
使用
略，可以参考官方文档Example – Top Artists
Luigi是python模块，可以创建复杂的离线作业工作流。支持处理依赖关系，工作流管理，可视化等。也支持hadoop。在github有13.4k个star，截止2020年7月2日。
pip3 install luigi
luigid
用浏览器打开 http://localhost:8082 可以看到可视化界面。
略，可以参考官方文档Example – Top Artists