細木数子氏のスキャンダル史において、今なお語り継がれる最大の事件が昭和の政財界のフィクサー・安岡正篤氏との婚姻無効騒動です。安岡氏は歴代首相の指南役として知られ、元号「平成」の考案者の一人ともされる大物思想家でした。
1983年、当時85歳と高齢で認知症の症状が進んでいた安岡氏に対し、当時45歳だった細木氏が突如として婚姻届を提出。安岡家の親族や門弟たちに一切知らされないまま強行されたこの入籍は、莫大な遺産や利権を狙ったものとして激しい批判を浴びました。
安岡氏の親族は即座に婚姻無効の調停を申し立て、泥沼の法廷闘争へと発展します。同年12月に安岡氏が急逝した後も争いは続き、最終的に翌1984年、心神喪失状態での婚姻届提出であったことが認められ、婚姻は法律上完全に無効となりました。この一件は、細木氏の権力欲と強引な手法を象徴する出来事として世間に記憶されることになります。