这是名为 Luigi 的 Linux 应用程序,其最新版本可以下载为 3.4.0.zip。 它可以在工作站的免费托管服务提供商 OnWorks 中在线运行。
免费下载并在线运行这个名为 Luigi with OnWorks 的应用程序。
请按照以下说明运行此应用程序:
- 1. 在您的 PC 中下载此应用程序。
- 2. 在我们的文件管理器 https://www.onworks.net/myfiles.php?username=XXXXX 中输入您想要的用户名。
- 3. 在这样的文件管理器中上传这个应用程序。
- 4. 从此网站启动OnWorks Linux online 或Windows online emulator 或MACOS online emulator。
- 5. 从您刚刚启动的 OnWorks Linux 操作系统,使用您想要的用户名转到我们的文件管理器 https://www.onworks.net/myfiles.php?username=XXXXX。
- 6. 下载应用程序,安装并运行。
SCREENSHOTS
Ad
路易吉
商品描述
Luigi 是一个 Python(经过 3.6、3.7、3.8、3.9 测试)包,可帮助您构建复杂的批处理作业管道。 它处理依赖关系解析、工作流管理、可视化、处理故障、命令行集成等等。 Luigi 的目的是解决通常与长时间运行的批处理相关的所有管道问题。 您想要链接许多任务,使它们自动化,并且会发生故障。 这些任务可以是任何东西,但通常是长时间运行的东西,例如 Hadoop 作业、向/从数据库转储数据、运行机器学习算法或其他任何东西。 您可以构建几乎任何您想要的任务,但 Luigi 还附带了一个工具箱,其中包含您使用的几个常见任务模板。 它包括对在 Hadoop 中运行 Python mapreduce 作业以及 Hive 和 Pig 作业的支持。 它还带有 HDFS 的文件系统抽象,以及确保所有文件系统操作都是原子的本地文件。
产品优势
- 构建复杂的批处理作业管道
- 构建包含数千个任务的长时间运行的管道很容易
- Luigi 帮助您将许多任务拼接在一起
- Luigi 负责很多工作流程管理
- 您的数据管道不会在包含部分数据的状态下崩溃
- 使用 Luigi 的可视化器,您可以很好地直观地了解工作流的依赖关系图
程式语言
Python
分类
这是一个也可以从 https://sourceforge.net/projects/luigi.mirror/ 获取的应用程序。 它已托管在 OnWorks 中,以便通过我们的免费操作系统之一以最简单的方式在线运行。