Budovu vybudovali v rokoch 1858 – 1863 v neogotickom štýle, pripomínajúcom anglickú gotiku. V tejto rozsiahlej budove v tvare “U”, jednej z najväčších objektov mesta, bol kedysi vybudovaný dôstojnícky zbor miestnej vojenskej posádky. V tejto budove býval so svojimi rodičmi slávny mikrobiológ Stanislav Prowazek, objaviteľ pôvodcu škvrnitého týfusu. V období medzi dvoma vojnami v budove fungovalo mestské divadlo. Na jeho hlavnej fasáde je umiestnený nápis: VIRIBVS VNITIS – V jednote je sila – heslo Františka Jozefa I. Pôvodne budova slúžila ako súbor dôstojníckych bytov pre dôstojníkov cisárskej a kráľovskej armády a ich rodiny. Na prízemí bolo zriadené kasíno pre dôstojníkov, ktoré dnes slúži pre reprezentačné účely mesta. Na nádvorí sa v r. 1999-2000 vybudoval amfiteáter. Most, umiestnený na nádvorí symbolizuje spoluprácu Komárna a Komáromu. Na nádvorí je umiestnená aj busta Jána Selyeho. Dôstojnícky pavilón je národnou kultúrnou pamiatkou.
