请提供一本编写并行程序的电子文档

cpu123

那位大虾有编写并行程序的电子文档呀，请提供一个吧。
谢谢！
在网上搜索了半天都搜不到呀。

lovaxi

很不错的

lucifer

ft,都志辉讲课可不怎么样

锋锋

都志辉，编著，

《高性能计算并行编程技术—MPI并行程序设计》，

清华大学出版社，2001年8月出版。

51.8万字，ISBN 7-302-04566-6，

国内第一本关于MPI的著作。


http://hpclab.cs.tsinghua.edu.cn/~duzh/book/mpi.pdf

lucifer

说实话，mpi就是沾了出道早的光，比较广泛而已。无论是学还是用，都不是那么容易的。上学的时候我们的并行计算课是都老师亲自教的，学了一个学期，实验做了无数，高性能中心的ps2都被我们搞死过几次，最后也不过是会写几个简单的linpack程序而已。
如果有条件的话，还是考虑一下其他的，例如openMP，这个东东还是很方便的。如果说mpi相当于学汇编，openMP就是C的水平了。学起来用起来都更符合习惯。

Glue

OpenMP 与 MPI 适用的环境不一样，MPI 可以用于多台电脑连在一起，所谓的集群 (cluster)，而OpenMP是用在多CPU的电脑上(通常比较贵)。
所以MPI现在用的比较多。

lovaxi

而且移植起来很方便

lucifer

openMP是针对shared memory的机器的。也就是目前主要的科学计算使用的机器。现在几乎已经是共享内存机器上面并行计算的工业标准了。可以看一下它和MPI的比较：Message-passing has become accepted as a portable style of parallel programming, but has several significant weaknesses that limit its effectiveness and scalability. Message-passing in general is difficult to program and doesn't support incremental parallelization of an existing sequential program. Message-passing was initially defined for client/server applications running across a network, and so includes costly semantics (including message queuing and selection and the assumption of wholly separate memories) that are often not required by tightly-coded scientific applications running on modern scalable systems with globally addressable and cache coherent distributed memories.