org.apache.spark.rdd.RDD.id()方法的使用及代码示例

x33g5p2x  于2022-01-28 转载在 其他  
字(1.1k)|赞(0)|评价(0)|浏览(185)

本文整理了Java中org.apache.spark.rdd.RDD.id方法的一些代码示例,展示了RDD.id的具体用法。这些代码示例主要来源于Github/Stackoverflow/Maven等平台,是从一些精选项目中提取出来的代码,具有较强的参考意义,能在一定程度帮忙到你。RDD.id方法的具体详情如下:
包路径:org.apache.spark.rdd.RDD
类名称:RDD
方法名:id

RDD.id介绍

暂无

代码示例

代码示例来源:origin: uk.gov.gchq.gaffer/spark-accumulo-library

tabletMap.put(tabletName, new AccumuloTablet(super.id(), idx, currentStart, currentEnd));
idx += 1;

代码示例来源:origin: Stratio/deep-spark

/**
 *
 * @param rdd
 * @param config
 * @param queryBuilder
 * @param <T>
 * @param <S>
 */
public static <T, S extends BaseConfig> void saveRDD(RDD<T> rdd, S config, UpdateQueryBuilder queryBuilder) {
  config.setRddId(rdd.id());
  config.setPartitionId(0);
  rdd.foreachPartition(new PrepareSaveFunction<>(queryBuilder, config, rdd.first()));
}

代码示例来源:origin: com.stratio.deep/deep-core

/**
 *
 * @param rdd
 * @param config
 * @param queryBuilder
 * @param <T>
 * @param <S>
 */
public static <T, S extends BaseConfig> void saveRDD(RDD<T> rdd, S config, UpdateQueryBuilder queryBuilder) {
  config.setRddId(rdd.id());
  config.setPartitionId(0);
  rdd.foreachPartition(new PrepareSaveFunction<>(queryBuilder, config, rdd.first()));
}

相关文章