org.apache.spark.api.java.JavaRDD.countApproxDistinct()方法的使用及代码示例

x33g5p2x  于2022-01-21 转载在 其他  
字(1.4k)|赞(0)|评价(0)|浏览(88)

本文整理了Java中org.apache.spark.api.java.JavaRDD.countApproxDistinct()方法的一些代码示例,展示了JavaRDD.countApproxDistinct()的具体用法。这些代码示例主要来源于Github/Stackoverflow/Maven等平台,是从一些精选项目中提取出来的代码,具有较强的参考意义,能在一定程度帮忙到你。JavaRDD.countApproxDistinct()方法的具体详情如下:
包路径:org.apache.spark.api.java.JavaRDD
类名称:JavaRDD
方法名:countApproxDistinct

JavaRDD.countApproxDistinct介绍

暂无

代码示例

代码示例来源:origin: org.apache.spark/spark-core

@Test
public void countApproxDistinct() {
 List<Integer> arrayData = new ArrayList<>();
 int size = 100;
 for (int i = 0; i < 100000; i++) {
  arrayData.add(i % size);
 }
 JavaRDD<Integer> simpleRdd = sc.parallelize(arrayData, 10);
 assertTrue(Math.abs((simpleRdd.countApproxDistinct(0.05) - size) / (size * 1.0)) <= 0.1);
}

代码示例来源:origin: org.apache.spark/spark-core_2.10

@Test
public void countApproxDistinct() {
 List<Integer> arrayData = new ArrayList<>();
 int size = 100;
 for (int i = 0; i < 100000; i++) {
  arrayData.add(i % size);
 }
 JavaRDD<Integer> simpleRdd = sc.parallelize(arrayData, 10);
 assertTrue(Math.abs((simpleRdd.countApproxDistinct(0.05) - size) / (size * 1.0)) <= 0.1);
}

代码示例来源:origin: org.apache.spark/spark-core_2.11

@Test
public void countApproxDistinct() {
 List<Integer> arrayData = new ArrayList<>();
 int size = 100;
 for (int i = 0; i < 100000; i++) {
  arrayData.add(i % size);
 }
 JavaRDD<Integer> simpleRdd = sc.parallelize(arrayData, 10);
 assertTrue(Math.abs((simpleRdd.countApproxDistinct(0.05) - size) / (size * 1.0)) <= 0.1);
}

相关文章

微信公众号

最新文章

更多