К проекту подключать библиотеки, и в момент обращения проверять версию - C#

Здравствуйте, коллеги! Надеюсь на Вашу помощь. Необходимо к проекту подключать библиотеки, и в момент обращения проверять версию, а если есть более новая, то её заменять новой, копируя с сервера. Библиотеки пишутся на C#. Подключаю и вызываю методы через Assembly.LoadFrom. Но если во время сессии программы я уже вызывал из библиотеки какой-то метод, удалить эту библиотеку и заменить на новой версии уже не получается, - она уже используется, а сделать некий unload я не знаю как. Может быть кто-то сталкивался? Читал про домены приложений, что нужно создавать новый - но уж больно заморочено.