MPI

     用MPI处理栅格(图像)数据,由于使用MPI过于复杂,因此实现了基于MPI的适用于地理栅格数据处理的并行编程模型,具体参考:一种支持多种并行环境的栅格地理计算并行算子

CUDA

     用CUDA处理过图像数据,在带有gpu的普通笔记本上实现了十几倍的加速比。具体参考:多流向算法GPU并行化

MapReduce

     用MR处理过一些大规模的日志文件,实现数据清洗、聚合等工作。

Spark

     用Spark来实现首页个性化推荐模型相关训练,包括feature工程、采样、模型训练(主要有逻辑斯谛回归、随机森林、SVM等)、模型评价(召回率、准确率、F1等指标)等工作。

相关文章:

  • 2022-01-24
  • 2022-12-23
  • 2022-12-23
  • 2021-08-13
  • 2022-12-23
  • 2021-10-18
  • 2021-11-15
  • 2022-02-19
猜你喜欢
  • 2022-12-23
  • 2022-12-23
  • 2021-11-11
  • 2021-11-14
  • 2021-11-10
  • 2021-04-07
  • 2021-05-20
相关资源
相似解决方案