Matt anuncio en lista de de tester de WordPress la creación de una nueva página en WordPress.org, Release Archive donde encontraras una lista de todas las versiones de WordPress hasta la fecha, puedes descargar en formato zip o tar.gz y su md5 correspondiente, se recomienda usar las últimas versiones de la rama 2.0.x y 2.1 que son las más estables.
Si no quieres ir a esta página otra forma descargar cualquier versión es como nos cuenta Matt en un email a lista de wp-hackers, voy intentar explicarlo de forma que se entienda (no me lo creo ni borracho).
Usa la dirección tipo http://wordpress.org/latest-VERSION.type donde VERSION es la version a descargar, por ejemplo 1.5.2 o 2.0.6, y type es el tipo de fichero comprimido (zip ó tar.gz), también puedes descargarte el md5 de la correspondiente versión usando la dirección http://wordpress.org/md5-VERSION donde VERSION es igual que el de antes.
Hacer una prueba descargando los siguientes enlaces http://wordpress.org/latest-2.0.7.tar.gz y http://wordpress.org/md5-2.0.7.
