В жизни Михаила Романова была драматическая любовь. Он полюбил Наталью Шереметьевскую, женщину необычайно красоты и обаяния, но которая уже была замужем за поручиком Вульфертом, офицером полка, где он служил. Она ответила князю взаимным чувством. Михаил понимал, что даже в случае развода, их брак не возможен – сын царя мог жениться только на особе монаршей крови. Однако ни князь, ни его избранница не смогли устоять перед охватившим их чувством. Кончилось все тем, что Николай II был вынужден отправить его в Орел, командовать в Черниговским лейб-гвардии Гусарским полком.

Однако скоро стало известно, что у влюбленных будет ребенок. Только тогда император разрешил подать документы на развод, и Наталья Сергеевна стала, наконец, свободной. Мечтая о совместной жизни с любимой, Михаил стал обустраивать свой особняк на Английской набережной, 54, который достался ему в наследство от его дяди. Однако петербургская знать не признавала «незаконную связь» члена царской семьи, про Наталью Сергеевну, получившей титул графини Брасовой, распространяли злые слухи и сплетни, в Петербурге ее никто не принимал.