بعد أن طلق تاونسند زوجته عام 1952 ، انتشرت شائعات عنه وعن مارجريت ؛ من المحتمل أن يكون الطلاق والحزن المشترك على وفاة الملك المتزامنة تقريبًا قد ساعدهما على الالتقاء معًا في خصوصية كلارنس هاوس ، حيث كانت للأميرة شقتها الخاصة.