後楽園内北に位置する馬場に面して建っています。
江戸時代には、家臣が馬術の上達ぶりを藩主の前で披露する行事があり、藩主は、この建物からその様子を眺めました。
桜の時期には、180メートルの馬場を桜が染め、花見の人気スポットとなります。