Для это вам нужно явно задать путь к файлу, прочесть его как XML, ну а потом использовать. Но это плохая практика, старайтесь держать конфигурацию для конкретного проекта в одном месте. Если у вас HTTPHandler используется в двух
или более разных проектах, то правильнее использовать отдельную сборку (dll), а конфигурацию использовать отдельную в каждом проекте, не бойтесь дублирования конфигурации в данном случае, это нормально.
Сделаем содержимое сообщества лучше, вместе!