代码之家  ›  专栏  ›  技术社区  ›  pratiksadaphal

Sqoop中$条件的重要性

  •  2
  • pratiksadaphal  · 技术社区  · 7 年前

    sqoop import命令中$conditions子句的意义是什么?

    select col1, col2 from test_table where \$CONDITIONS
    
    1 回复  |  直到 7 年前
        1
  •  6
  •   Taha Naqvi    7 年前

    Sqoop通过继承Hadoops并行性来执行高效的数据传输。

    • 同时转移,你

    • Sqoop公司 将自动用生成的条件替换此占位符,指定 每个任务应传输哪一部分数据。

    • 而你可以跳过 但是,这样的限制将对性能产生严重影响。

    可以执行“从foo中选择bla,其中(id>=0且id<10000)”,以及 下一个映射器可能会执行“从foo中选择bla,其中(id>=10000