原先军帅府所在是尚可喜的平南王府，监国至广州后周士相将军帅府迁至耿继茂的靖南王府，这座原先的平南王府改为行宫所在。靖南王府比平南王府稍小一些，但内中也是亭院楼台，无一不足，大大小小屋子有四百多间，花园、校武场等亦是俱全。

帅府被分为三部，最里面是内眷所在，前面则是军帅府的六官及军部所在；西侧是铁人卫的营房，东面一处院子却是军情司总部所在。

军情司大使张安的公房不大，摆设