Когда супруги вернулись в Гатчину, Владимир, как и прежде, продолжал выполнять свои служебные обязанности. А его жена в это время то и дело отправлялась с великим князем на какую-нибудь увеселительную прогулку. Иногда в сопровождении его сестры Ольги и Куликовского, порой с маленькой Татой, но все чаще – вдвоем.
Михаил Александрович чуть ли не каждый день привозил любимую женщину с ее дочерью в Большой Гатчинский дворец. Однажды, когда влюбленные бродили по залам, забыв обо всем на свете, пятилетняя Тата куда-то исчезла. Оказалось, она забрела в Тронный зал, и с видимым удовольствием уселась на обитый ярко-красной парчой трон. Позднее она отмечала в воспоминаниях, что так и сидела на нем, болтая ногами, пока ее не нашли взрослые. Михаил Александрович, увидев девочку, расхохотался, а мать очень рассердилась, стащила ее оттуда за руку и отругала, сказав, что дочь совершила ужасный поступок. Но великий князь тут же пришел ей на помощь. Он пообещал, стараясь сохранить серьезный вид, что ничего не расскажет об этом случае императору.
С наступлением лета великий князь показал Тате весь огромный Гатчинский парк, в котором провел детство. Больше всего ей понравилась лодочная станция, где было множество самых разнообразных судов. Впоследствии, спустя многие годы, она вспоминала это время как чудесное и незабываемое.
…Дома же ситуация накалялась день ото дня. Иногда подозревающий измену муж не считал нужным больше сдерживать свой гнев, а порой просто и не мог это сделать. В середине июня 1909 года Михаил пригласил Наташу и Вульферта в Петергоф – пообедать на императорской яхте «Зарница». Были там и другие гости – великая княгиня Ольга, ее муж и Куликовский.
На фотографиях, сделанных в этот день, Владимира Вульферта в этом компании можно увидеть в последний раз. Улыбка вымученная, словно сквозь зубы. А дома он больше не сдерживался, и давал волю гневу. Как же так? Ему пришлось вытерпеть столько унижений, он фактически потерял жену и… все еще поручик. Амбиции так и не удовлетворены.
Однажды, во время ссоры – с криками, обвинениями, Владимир набросился на жену с кулаками. Ей удалось вырваться, и она заперлась в детской. Но жили-то они под одной крышей, и следующий скандал не заставил себя долго ждать. Наталия Сергеевна решила разорвать отношения с Вульфертом, и заявила ему, что отныне отказывается выполнять супружеские обязанности. Но не тут-то было! Униженный, разгневанный и жаждущий отмщения Владимир взял силой то, что, как он считал, принадлежало ему по праву мужа.
Наталия заявила, что уходит от него, и собирается на несколько недель уехать за границу. Вульферт протестовал, но, осознав, что жена не успокоится, не сделав по-своему, вынужден был согласиться. Он с горечью подумал: по крайней мере, в этой поездке