服部隆之の母親は服部時子です。母親は音楽家ではありませんが、服部隆之が幼少期にピアノの練習をさぼった時は、決まって母親に叱られたと語っています。音楽一家に生まれた息子を育てるために必死だったのかもしれないですね。

服部隆之には妹が1人おり、名前は服部奈緒といいます。妹の服部奈緒は父親である服部克久のマネージャーを務めていたそうです。

服部隆之の妻は元プロバイオリニストとして活躍していた服部エリです。

服部隆之の娘はバイオリニスト服部百音です。5歳でヴァイオリンを始め、8歳でオーケストラと共演しました。そして、2009年、10歳の時には、ポーランドで行われたリピンスキ・ヴィエニヤフスキ国際コンクールで第1位及び特別賞を受賞。史上最年少記録となりました。

祖父の服部良一は、「東京ブギウギ」や「買物ブギー」、「青い山脈」、「一杯のコーヒーから」など、戦前、戦後を通じ庶民に愛されるヒット曲を多く世に送り出しました。ジャズで音楽感性を磨いた和製ポップス史における重要な音楽家の一人です。