Смотря какие деньги.
Какую-нибудь не ходовую валюту конечно же только в банке и обменяешь.
Но если нужно купить валюту вроде долларов или евро - достаточно и обменных пунктов.
В частности, я обычно меняю деньги в https://obmenka24.kharkov.ua/ этот пункт приема находится относительно недалеко от моей работы и когда получаю зарплату, то сразу топаю к ним и покупаю 50 или 100 у.е. это у меня такая полезная привычка.