Во время третьего похода великого князя Василия Ивановича на Смоленск в июле 1514 г. держал сторону польского короля, под властью которого находился тогда город. Когда Смоленск сдался,
Варсонофий признал его вотчиною и дединою великого князя; но после поражения великокняжеских войск при Орше изменил (по словам московских летописей)
Москве и обратился к королю с приглашением овладеть городом. По доносу мещан, наместник Смоленска, князь Шуйский, отослал
епископа Варсонофия в
Москву, откуда он был сослан в Спасо-Каменный монастырь. - См. "Полное Собрание
Российских Летописей" (т. VIII, 255 - 258; VI, 27; IV, 137).