هل يلزم الطلاق لفسخ الزواج إذا تم بغير ولي؟

السؤال: حضرتك ذكرتَ أن الزواج بدون ولي مِن مسائل الخلاف غير السائغ، لكني قرأتُ أن العقد يكون صحيحًا بالاتفاق ممن تزوج بغير ولي وهو يظن جواز ذلك كمن تزوج على يد مأذون أو كان متبعًا لمذهب الإمام أبي حنيفة ومقلدًا له، وبناءً على ذلك يكون الأمر يحتاج إلى طلاق شرعي، وليس أن الزواج باطل مِن أصله كما قد فهمتُ من كلام سابق لحضرتك من أنه لا يحتاج إلى طلاق؛ لأن ما بني على باطل فهو باطل، فهل ما فهمته عن حضرتك صحيح؟ وما الصواب في هذه المسألة؟