В 1161 году Рогволод Борисович, княживший тогда в Полоцке, осадил Володаря в его Городце. Володарь не стал биться с ним днем, но вместе с литовцами сделал вылазку ночью и нанес осаждавшим сильное поражение. После этого Рогволод не решился вернуться в Полоцк, и полочане взяли себе князем Всеслава Васильковича.

В 1167 году Володарь пошел на Полоцк. Всеслав вышел к нему навстречу, но Володарь, не дав ему собраться и выстроить хорошенько полки, ударил внезапно на полочан из засады, многих убил, других взял в плен и заставил Всеслава бежать в Витебск, а сам пошел в Полоцк и уладился с тамошними жителями, целовал с ними крест, как говорит летописец. Утвердившись здесь, Володарь пошел к Витебску против Давыда Ростиславича и Всеслава, стал на берегу Двины и начал биться через реку с неприятелем; Давыд не хотел вступать с ним в решительное сражение, поджидая из Смоленска своего брата Романа, как вдруг в одну ночь ударил страшный гром, ужас напал на все полоцкое войско, и дружина стала говорить Володарю: "Чего стоишь, князь, не едешь прочь? Роман переправится через реку, а с другой стороны ударит Давыд". Володарь испугался и побежал от Витебска; на другое утро, узнав о бегстве врага, Давыд послал погоню, которая, однако, не могла настичь самого князя и переловила только многих ратников его, заблудившихся в лесу. А Всеслав вновь успел занять Полоцк.