Budynek położony jest nad Jeziorem Białym Augustowskim na półwyspie Pień przy zatoce Orzechówka w części miasta nazywanej Klonownica. W sąsiedztwie znajduje się przystanek kolejowy Augustów Port.
Dom Wypoczynkowy zaprojektował w stylu modernistycznym architekt Juliusz Nagórski. Budynek w stanie surowym postawiono w 1934, a oddano do użytku w 1935. Prace przy stanie surowym zajęły jedynie dwa miesiące (20 września – 20 listopada 1934).
W ośrodku odpoczywali m.in. Walery Sławek, Janusz Jędrzejewicz, Edward Rydz-Śmigły i Józef Beck. W marcu 1938 odbyła się w nim konferencja polsko-litewska, poprzedzająca nawiązanie stosunków dyplomatycznych.
Po II wojnie światowej w obiekcie ulokowano Wojskowy Dom Wypoczynkowy. Obecnie mieści się w nim ośrodek turystyczny o nazwie Oficerski Yacht Club R.P. Pacific WDW.
W roku 1999 zespół obiektów Yacht Clubu został wpisany do rejestru zabytków. W skład zespołu wchodzą:
- budynek Yacht Clubu
- drewniana portiernia
- budynek przystani, tzw. Biały Domek (po drugiej stronie zatoki)
- park leśny.