Criar referência a diferentes dll´s em modo DEBUG e RELEASE

Pessoal, estou com o seguinte problema.
Preciso fazer referência ao mesmo arquivo de dll, em locais diferentes, em modo DEBUG e RELEASE.
Exemplo:
Projeto de trabalho: MyProject, com referência a dll: Library.dllLocal da dll debug: c:\visualstudio\solutionX\.....\Library.dllLocal da dll release: \\path\to\release\final\version\Library.dll
Quando eu fizer o switch no Visual Studio de debug para release, gostaria que ele compilasse meu projeto contendo a dll release, e quando mudasse para debug, compilasse com a dll debug.
Estou usando Visual Studio 2005, e o projeto é C# com ASP.NET.
Obrigado.