新編武蔵風土記稿には「先祖は泉三郎忠衡（奥州平泉、４代将軍藤原泰衡の弟）より出づ、忠衡が子新太郎常衡、其子常衡の子孫小泉を氏とするものありと云うのみにて、其間の世系を失せり。天正の頃小泉左京亮と云ものより後の事は詳に伝えたり、左京亮は天正８年２月１５日歿す、其子を左京亮政次と云」と記されています。
小泉家は天正１９年（１５９１）に神供免田７０余石を賜って徳川家康に召し抱えられ、源栄山八幡宮の神主に任命されて以来、代々神主を務め、現在２５代となっていますが、火災の為途中の書類が焼失して御綸旨によってもはっきりした記録としては次の通りです。

　　　　　＜就任年月日＞　　　　　　　　　　　　　＜氏名＞
１４代　承応４年２月２９日　（１６５５）　　小泉伊予守藤原吉久
１５代　元禄２年３月４日　　（１６８９）　　小泉薩摩守藤原正重
１６代　亨保４年２月３日　　（１７１９）　　小泉長門守藤原重安
１７代　寛保３年５月９日　　（１７４３）　　小泉出羽守藤原政知
１８代　明和７年５月８日　　（１７７０）　　小泉伊予守藤原政右
１９代　天明５年４月２８日　（１７８５）　　小泉信濃守従五位下藤原政俊
２０代　文化１１年２月２８日（１８１４）　　小泉出羽守従五位下藤原政直
２１代　文政４年４月１６日　（１８２１）　　小泉信濃守従五位下藤原政貞
２２代　嘉永７年５月１日　　（１８５３）　　小泉出羽守従五位下藤原政廣
２３代　明治３５年７月１０日（１９０２）　　小泉政江
２４代　昭和９年１２月２０日（１９３４）　　小泉政穂
２５代　昭和５０年４月１０日（１９７５）　　小泉直穂