小林稔侍の自宅を巡っては、ファンの間で長年にわたり「東京都世田谷区の閑静な住宅街」あるいは「神奈川県横浜市内の落ち着いた高級住宅地」という2つの有力な説が浮上しています。芸能人のプライバシー保護の観点から詳細な番地などの住所は非公表ですが、どちらのエリアも都内の主要スタジオや緑豊かな自然環境へのアクセスが良好な場所です。
近隣住民やファンの目撃情報によると、派手な高級外車を乗り回すような生活ではなく、落ち着いた佇まいの邸宅で静かに暮らしている姿が伝えられています。散歩の途中で見せる柔らかな会釈や、近隣のスーパー・商店街で見かける気さくな立ち振る舞いは、ドラマで見せる温厚なキャラクターそのものだといいます。
「昭和の映画スターが建てる派手な大豪邸」というよりは、「家族とのプライベートと静謐な時間を大切にする上質な邸宅」という住まい選びに、誠実な人柄がにじみ出ています。