Mars: Accelerating MapReduce with Graphics Processors
Rattachement africain : us, hk, sg. Niveau de preuve : code pays fourni par la source.
Le résumé fourni par la source
We design and implement Mars, a MapReduce runtime system accelerated with graphics processing units (GPUs). MapReduce is a simple and flexible parallel programming paradigm originally proposed by Google, for the ease of large-scale data processing on thousands of CPUs. Compared with CPUs, GPUs have an order of magnitude higher computation power and memory bandwidth. However, GPUs are designed as special-purpose coprocessors and their programming interfaces are less familiar than those on the CPUs to MapReduce programmers. To harness GPUs' power for MapReduce, we developed Mars to run on NVIDIA GPUs, AMD GPUs as well as multicore CPUs. Furthermore, we integrated Mars into Hadoop, an open-source CPU-based MapReduce system. Mars hides the programming complexity of GPUs behind the simple and familiar MapReduce interface, and automatically manages task partitioning, data distribution, and parallelization on the processors. We have implemented six representative applications on Mars and evaluated their performance on PCs equipped with GPUs as well as multicore CPUs. The experimental results show that, the GPU-CPU coprocessing of Mars on an NVIDIA GTX280 GPU and an Intel quad-core CPU outperformed Phoenix, the state-of-the-art MapReduce on the multicore CPU with a speedup of up to 72 times and 24 times on average, depending on the applications. Additionally, integrating Mars into Hadoop enabled GPU acceleration for a network of PCs.
Ce résumé expose les affirmations des auteurs. BNTIC ne l’interprète pas comme une validation indépendante des résultats.
Le contrôle bibliographique ouvert
DOI retrouvé dans Crossref DOI retrouvé ; titre concordant.
- Titre Crossref
- Mars: Accelerating MapReduce with Graphics Processors
- Date Crossref
- 01/04/2011
- Éditeur
- Institute of Electrical and Electronics Engineers (IEEE)
- Type
- journal-article
Ce recoupement confirme des métadonnées liées au DOI. Il ne confirme ni la méthode ni les conclusions de l’étude, et il ne compte pas comme une seconde source scientifique indépendante.
Où se fait cette recherche
-
University of Wisconsin–Madison pays non établi dans la noticeUniversité ou école supérieure
-
Hong Kong University of Science and Technology pays non établi dans la noticeUniversité ou école supérieure
-
Nanyang Technological University pays non établi dans la noticeUniversité ou école supérieure
-
Microsoft (United States) pays non établi dans la noticeEntreprise
-
University of Wisconsin- Madison Madison WI USA pays non établi dans la noticeUniversité ou école supérieure
-
Sch. of Comput. Eng. pays non établi dans la noticeInstitution
-
Hong Kong Univ. of Sci. & Technol. pays non établi dans la noticeOrganisation à but non lucratif
-
Microsoft Corporation pays non établi dans la noticeInstitution
University of Wisconsin–Madison, Hong Kong University of Science and Technology et Nanyang Technological University, avec 5 autres affiliations.
Une affiliation ne permet pas de déduire la nationalité d’un auteur.