因此，我的任务是将一个名为“lightside”的程序集成到hadoop作业中，我很难弄清楚该怎么做。因此，基本上，lightside不是一个jar，而是作为一个完整的目录，包括对其运行至关重要的xml文件。到目前为止，我的团队中的数据科学家使用这个程序的方式是运行一个python脚本，该脚本实际上运行一个可执行文件，但这似乎效率极低，因为每次调用它都会启动一个新的jvm。话虽如此，我不知道还能怎么处理。
c8ib6hqw1#
我是lightside研究员工作台的维护人员之一。lightside还包括一个很小的predictionserver类，用于处理通过http对新示例的预测—您可以在bitbucket上看到它。如果你想训练新的模型，你可以修改这个服务器来做你想做的事情，从side.recipe.chef类中提取线索。
3wabscal2#
如果您正在编写自己的mapreduce作业，那么可以将所有jar文件作为库，将xml文件作为资源。
2条答案
按热度按时间c8ib6hqw1#
我是lightside研究员工作台的维护人员之一。lightside还包括一个很小的predictionserver类，用于处理通过http对新示例的预测—您可以在bitbucket上看到它。
如果你想训练新的模型，你可以修改这个服务器来做你想做的事情，从side.recipe.chef类中提取线索。
3wabscal2#
如果您正在编写自己的mapreduce作业，那么可以将所有jar文件作为库，将xml文件作为资源。