（后改为桐之间），因此得名「土圭间组」。
这些驻守在江户城中的宿卫军势是随着大番开始在大坂城、骏府城、春日山城、二条城等直辖城池驻守而发展起来的，其主要构成为原上杉谦信麾下的段母衣众。
之后，这些宿卫军势还被第二任将军上杉氏虎分割再编为书院番六组、小姓组六组。此时，书院番头（兼任小姓组番头）是上杉氏虎年少时的近臣樋口兼续（樋口与六，樋口兼丰长子）、色部长影（色部胜长之侄）、新发田盛喜（新发田重家之弟）等人来担任。至于无法继承旗本家业的次男和三男，则是被上杉氏虎进行吸收，用于对书院番、小姓组、大番等军势进行一定增强和再编。