Galeria mieści się przy ulicy Gdańskiej 20. Stoi pomiędzy kościołem św. Piotra i Pawła a Parkiem Kazimierza Wielkiego.Po II wojnie światowej większość działalności artystycznej w Bydgoszczy koncentrowała się w Pomorskim Domu Sztuki, czy to operze, teatrze czy wystawach.

7 maja 1946 r., podczas obchodów 600-lecia miasta Bydgoszczy, odsłonięto Pomorski Dom Sztuki, w skład którego wchodził m.in. stały salon sztuki, zwany BWA (Centralne Biuro Wystaw Artystycznych). Budynek przy ul. Gdańskiej był także siedzibą warsztatów artystycznych dla pomorskich pisarzy, muzyków i artystów ze wszystkich dziedzin, a ponadto do 1982 roku użytkowany był przez Państwową Szkołę Artystyczną im. Leona Wyczółkowskiego.

Aby uzyskać niezależność i widoczność, w 1970 roku wzniesiono dedykowany budynek, dzięki aktywnemu wsparciu m.in. Aleksandra Schmidta, ówczesnego Prezydenta Obwodu Bydgoskiego, oraz Andrzeja Szwalbe, dyrektora Filharmonii Pomorskiej. Został zaprojektowany tak, aby był połączony z zabytkowym budynkiem Pomorskiego Domu Sztuki. W 1994 roku galeria przeszła pod zarząd Ratusza.Obiekt zapewnia obecnie możliwość wystawiania każdej dyscypliny środowiska sztuki współczesnej w takich dziedzinach jak: malarstwo, grafika, rzeźba, kreacje tkanin, fotografia, sztuka wideo...

Znajdują się w nim dzieła autorów różnych źródeł: bydgoszczy, ale także z Polski i zagranicy.

Dwukondygnacyjny gmach oferuje rozległe przestrzenie, z których każda składa się z dużej sali o powierzchni 364 metrów kwadratowych oraz sali kameralnej o powierzchni 61 metrów kwadratowych. Ponadto na parterze znajduje się sala multimedialna o powierzchni 118 metrów kwadratowych.

Biblioteka galerii udostępnia nowe publikacje z zakresu sztuki współczesnej, a także dokumentację dotyczącą plików biograficznych artystów. Każda wystawa galerii jest zaopatrzona w drukowane katalogi i różną dokumentację (aktówka zawierająca katalogi, recenzje, zdjęcia, filmy).