父子關係緊張
潘若迪的父親為陸軍退役少將，曾任職於中華電視公司美術組，母親則是台視《群星會》歌手憶如，潘若迪與父親關係曾因嚴厲管教而緊張，直到父親70歲時才達成和解並首次擁抱。
潘若迪透露曾因數學只考2分，被父親拿槍抵頭痛罵：「不槍斃你，我對不起國家」，他從小就知道：「男孩子要獨立，成功都要靠自己爭取」，父親也認為他書念不好，不配吃雞腿，水果只給半顆，他為此偷吃同學便當，「父親鐵的紀律佔掉我所有的生活跟成長過程」。
潘若迪育有現年12歲女兒潘朵拉（拉拉），她的藝術天分也遺傳自爺爺，潘若迪曾表示，「我父親是一個非常有名的藝術家，蔣經國都拿過他的畫，台灣現在軍史館還有我父親的畫」。
潘若迪還說，有次女兒數學考100分，父親感動的哭了，「潘家出息了，全部都看你了寶貝，潘若迪以前才考2分」，激動的父親甚至放話，「妳回來我買塊地給妳」，讓潘若迪傻眼不已，「爸！她考100分你買地給她幹什麼」！年紀還小的拉拉哪會想要地，當場拒絕爺爺，「爺，我不要地，你可以買《鬼滅》給我嗎」？
點擊閱讀下一則新聞
沈玉琳回歸首錄《11點熱吵店》從來賓做起！好友潘若迪隨行照顧他
