Язык для параллельных математических вычислений существует?

Фортран? :)

Если серьезно - есть диалекты Фортран с явным указанием параллелизма, "параллельные" диалекты Си. И OpenMP :)

Ну и для эстетов - SR :D

Может это? http://parus.sourceforge.net/

matlab?

http://wotug.ukc.ac.uk/parallel/internet/www/other-projects.html

Concurrent Haskell

HPF, F95+co-array, Fortran+OpenMP, Fortran+MPI,
Зависит от задачи, которую Вы хотите моделировать.

Best wishes,
Vic.

MPI это понятно. Сами на C++ + MPI софтину пишем... Но вот только это геморрой. Задача фактически состоит в реализации параллельных алгоритмов линейной алгебры. Т.е. всё, что может быть параллельным, должно быть параллельным, по возможности без ухудшения качества решения. Вот меня и заинтересовало, как такое можно с помощью языка программирования решать...

Вагон и небольшая телега.

http://parallel.ru/tech/tech_dev/par_lang.html

ScaLAPACK ?
Best wishes,
Vic.

MapReduce.