我对大数据还不熟悉。从一些关于flume和sqoop之间的区别的答案来看，flume和sqoop都可以从源代码中提取数据并推送到hadoop。有谁能详细说明Flume的使用位置和sqoop的位置吗？两者是否可以用于相同的任务？
tktrz96b1#
flume和sqoop都设计用于处理不同类型的数据源。sqoop可以与任何支持jdbc连接的rdbms系统一起工作。另一方面，flume可以很好地处理流数据源，比如在您的环境中不断生成的日志数据。明确地，sqoop可用于向rdbms系统（如oracle、mssqlserver、mysql、postgresql、netezza、teradata和其他一些支持jdbc连接的系统）导入/导出数据。flume可以用来从下面这样的源接收高吞吐量数据，并插入下面的目的地（汇）。常用Flume来源：假脱机目录-在其中创建大量文件的目录，主要用于收集和聚合日志数据jms—从基于jms的系统收集度量还有更多常用Flume：高密度光纤数据库SolrElasticSearch还有更多不，这两种工具不能用于实现相同的任务，例如flume不能用于数据库，sqoop不能用于流数据源或平面文件。如果你有兴趣Flume也有一个替代做同样的事情称为chukwa。
1条答案
按热度按时间tktrz96b1#
flume和sqoop都设计用于处理不同类型的数据源。
sqoop可以与任何支持jdbc连接的rdbms系统一起工作。另一方面，flume可以很好地处理流数据源，比如在您的环境中不断生成的日志数据。
明确地，
sqoop可用于向rdbms系统（如oracle、mssqlserver、mysql、postgresql、netezza、teradata和其他一些支持jdbc连接的系统）导入/导出数据。
flume可以用来从下面这样的源接收高吞吐量数据，并插入下面的目的地（汇）。
常用Flume来源：
假脱机目录-在其中创建大量文件的目录，主要用于收集和聚合日志数据
jms—从基于jms的系统收集度量
还有更多
常用Flume：
高密度光纤
数据库
Solr
ElasticSearch
还有更多
不，这两种工具不能用于实现相同的任务，例如flume不能用于数据库，sqoop不能用于流数据源或平面文件。
如果你有兴趣Flume也有一个替代做同样的事情称为chukwa。