我们如何在火花视图上创建等权重直方图

如何解决我们如何在火花视图上创建等权重直方图

我有一个关于 spark 的全局临时视图，我想在数字列上生成等权重直方图。使用 spark 3.1.1 ，这是我使用的示例代码，但对于包括直方图在内的所有列统计数据，我得到的值为 NULL。

    spark.sql("SET spark.sql.cbo.enabled=true");
    spark.sql("SET spark.sql.statistics.histogram.enabled=true");

    df.createGlobalTempView(tableName);

    spark.sql("Select * from global_temp.dummy2").show();

    sqlCommand = "CACHE TABLE global_temp.dummy2";
    runsqlCommand(sqlCommand,"CACHE ");


    sqlCommand = "ANALYZE TABLE global_temp.dummy2 COmpuTE STATISTICS FOR COLUMNS id,name";
    runsqlCommand(sqlCommand,"Analyze");

    spark.sql("Describe extended global_temp.dummy2 id").show();

也可以使用任何替代方法..我也愿意接受其他方法/建议。