Luigi — это модуль Python, который помогает создавать сложные конвейеры пакетных заданий. Он обрабатывает разрешение зависимостей, управление рабочими процессами, визуализацию и т. д. В него также встроена поддержка Hadoop.