在sqoop中传递密码的安全方法

@在2015年3月的stackoverflow 23916985回复中,阿贝亚马斯目前给出了最好的答案 here 。本质上,我们应该升级到sqoop>1.4.5并使用java密钥库(JKES)、org.apache.sqoop.util.password.CryptoFileLoader或我们自己类中定义的加载器。

提供的CryptoFileLoader有一个缺点,即假定加密密码短语和salt将作为-D参数提供,以驱动系统财产(可以通过ps进行监听)或配置XML中的纯文本。

我最初在 this 2015年3月的博客,之前错过了它(它没有标题,但如果你看第3步第2部分,你会发现它)。

令人惊讶的是,这不是推荐的做法,也没有出现在sqoop 1.4.5文档中。

在 --password-file 选项,我为sqoop制作了一个补丁,以便在使用 -P 命令

这样,我就可以从配置文件中解密密码,并使用stdin管道使用该密码调用sqoop,而无需使用可以看到纯密码的文件或命令行。

编辑文件 src/java/org/apache/sqoop/SqoopOptions.java

更换 securePasswordEntry 函数代码依据

private String securePasswordEntry() {
try {
  return new String(System.console().readPassword("Enter password: "));
}
// PATCH Bouygues Telecom - read password from pipe if launched in non-interactive mode
catch (NullPointerException e) {    
    try {
        final java.io.BufferedReader reader = new java.io.BufferedReader(
                            new java.io.InputStreamReader(System.in));
        return reader.readLine();
    }
    catch (java.io.IOException excep) {      
        LOG.error("It seems that you have launched a Sqoop metastore job via");
        LOG.error("Oozie with sqoop.metastore.client.record.password disabled.");
        LOG.error("But this configuration is not supported because Sqoop can't");
        LOG.error("prompt the user to enter the password while being executed");
        LOG.error("as Oozie tasks. Please enable sqoop.metastore.client.record");
        LOG.error(".password in sqoop-site.xml, or provide the password");
        LOG.error("explicitly using --password in the command tag of the Oozie");
        LOG.error("workflow file.");
    }
    return null;
  }
}

麻烦的是必须重新修补Sqoop的每一个新版本。。。我可能应该提交一个jira(对我的补丁会被考虑在内的信心很低),或者按照您想要的方式转到--password文件选项。