Долгорукие ехали в ссылку медленно, с большим обозом, часто и подолгу останавливались, будто пребывали в приятном путешествии. По дороге мужчины охотились: «Где случитца какой перелесочек, – писала Наталия Борисовна, – место для них покажитца хорошо, верхами сядут и поедут, пустят гончих». Удивительное легкомыслие или, может быть, надежды, что их нагонит новый курьер и вернет в столицу? А между тем в Москве злобствовала новая императрица. Не успели отъехать от Москвы на сто верст, как ссыльных нагнал нарочный офицер – отобрал награды, ордена и ленты. Потом вновь прискакал новый нарочный – он уже отобрал у «порушенной невесты» Екатерины Алексеевны портрет ее жениха Петра II, подаренный ей в день обручения.

Медлительность Долгоруких в исполнении царской воли до добра их не довела. 12 июня 1730 года появился новый указ, в котором Долгорукие обвинялись в непослушании, отказе ехать в пензенские деревни. «Того ради, – говорилось в указе, – послать князя Алексея Долгорукого с женою и со всеми детьми в Березов… И за ними послать пристойный конвой офицеров и солдат и держать их в тех местах безвыездно за крепким караулом». Все имения опальных были конфискованы и приписаны к дворцовым владениям, ссыльным же полагалось по одному рублю на человека.

Между тем Долгорукие об этом указе не знали, они только что добрались до места своей пензенской ссылки. И тут… не успели устроиться – новая беда. Долгорукая так описывает происшедшее: «Только что отобедали – в евтом селе был дом господской и окна были на большую дорогу, – взглянула я в окно, вижу я пыль великую по дороге, видно издалека, что очень много едут и очень скоро бегут. Как стали подъезжать, видно, что все телеги парами, позади коляскам покоева. Все наши бросились смотреть, увидели, что прямо к нашему дому едут: в коляске офицер гвардии, а по телегам солдаты 24 человека. Тотчас мы узнали свою беду». Это прибыл капитан-поручик Макшеев с командой солдат и с указом доставить Долгоруких в Сибирь, в Березов.

Началась тяжелая, долгая дорога в Сибирь – суровая природа, неудобства в пути. Был даже момент, когда началась срашная буря на реке и охранники решили бросить ссыльных на барже на произвол судьбы, а самим спасаться на лодках. Испили Долгорукие и чашу унижений и оскорблений, которую им регулярно подносили в пути охранники. Если до Тобольска – столицы тогдашней Сибири – ссыльных вез конвой под началом гвардейского офицера Макшеева, который все-таки знал, кто такие Долгорукие, и невольно оказывал им почтение, делал им, в нарушение указа, мелкие послабления, то после Тобольска все переменилось. Долгорукие оказались во власти местных начальников. Прощаясь с Долгорукими, Макшеев, по словам Наталии, грустил при расставании и говорил им: «Теперь-то вы натерпитесь великого горя, эти люди необычайные, они с вами будут поступать как с подлыми, никаково снисхождения от них не будет». Это и неудивительно – в глубине Сибири бывшие титулы, звания, слава ровным счетом ничего не значили, а «как мы тогда назывались арестанты, иного имени не было, что уже в свете этого титула хуже, такое нам и почтение». И действительно, поступили они под команду гарнизонного капитана – выходца из крестьян. Он чванился, даже не разговаривал с арестантами, а между тем ходил к ним обедать. «В чем он хаживал, – зажимая носик, восклицала княгиня Долгорукая, – епанча солдацкая на одну рубашку, да туфли на босу ногу, и так с нами сидит. Я была всех моложе и невоздержна, не могу терпеть, чтоб не смеятца, видя такую смешную позитуру». Но делать было нечего, пришлось привыкать и к неотесанному начальнику конвоя, и к ссылке в Заполярье, грязи, деревянным ложкам и оловянным стаканам вместо золотых и серебряных.

Испытания, выпавшие на долю опальных, не сплотили, а, наоборот, поссорили многочисленную семью Долгоруких (кроме Ивана в ссылку отправились родители его – князь Алексей и княжна Прасковья, «порушенная» царская невеста и сестра Ивана княжна Екатерина, другие родственники). Жизнь в заполярном Березове и для вольных людей была тяжелой: тьма, холод, убогая, тесная общая казарма внутри острога. Любопытно, что из описи вещей Долгоруких видно: все они захватили с собой множество старинного покроя платьев для облачения в домашней обстановке. На людях Долгорукие ходили в париках, камзолах, робронах, а дома, вдали от посторонних глаз, – в мягких, удобных дедовских нарядах. И только княжна Екатерина привезла с собой огромное количество платьев, сшитых для нее ко дню свадьбы. (Уже много лет спустя после возвращения из ссылки, в 1745 году, она вышла замуж, но вскоре после свадьбы умерла. Перед смертью она собрала силы и сожгла все свои платья – чтобы никому не достались!) Долгорукие так часто ссорились и даже дрались, что охранникам приходилось их успокаивать и разнимать. Особенно часто возникали ссоры княжны Катерины с ее отцом Алексеем Григорьевичем. «Порушенная невеста» Екатерина Алексеевна люто ненавидела отца и брата Ивана. Ведь ее привезли в тот город и в тот острог, где за полтора года до этого, 25 декабря 1728 года, прямо в день своего восемнадцатилетия умерла первая «порушенная невеста» Петра II – Маша Меншикова! Она попала сюда вместе с отцом из-за интриг Долгоруких, свергших Меншикова. Как говорится, не копай другому яму, сам в нее попадешь! Екатерина бунтовала, обвиняя отца и брата в том, что они разрушили всю ее жизнь. Так это и было: ведь до истории с обручением юного императора и Екатерины у нее был избранник, которого она любила и за которого хотела выйти замуж. Охрана, опасаясь неприятностей, сообщила об отчаянных ссорах и драках в семье Долгоруких в столицу, оттуда пришел суровый указ, чтобы Долгорукие «впредь от таких ссор и непристойных слов, конечно, воздержались и жили смирно под опасением наижесточайшего содержания», то есть тюремного заключения. Долгорукие утихли, но ненадолго.

Наталия же лепилась к Ивану. Она родила двух сыновей – Михаила и Дмитрия, которыми и занималась. Вообще из всех Долгоруких только княгиня Наталия была там счастливым человеком. В ссылке, среди невзгод и скандалов, потрясавших семью мужа, она одна сохраняла человеческий облик, проявила бесценные свойства своей доброй души. Так получилось, что ею двигали любовь и сострадание к своему избраннику. Кем бы ни был князь Иван – а в Сибири он не переменился, бражничал и кутил по-старому, – для жены он всегда был «мой сострадалец».В 1734 году умер свекор Наталии князь Алексей. К этому времени жизнь ссыльных стала полегче: они наладили отношения с охраной, стали выходить из острога, сблизились с местным воеводой, которому была лестна компания опальных, но все же вельмож, Долгорукие стали ходить к горожанам в гости – иначе можно было умереть от тоски в городке, где больше полугода стояла полярная ночь. Муж Наталии, и раньше склонный к загулам, позволял себе на людях высказываться весьма нелицеприятно о властях, об императрице. Наконец, в 1738 году на Долгоруких донесли в столицу. Автором доноса стал таможенный подьячий Тишин, который стал ухаживать за «порушенной невестой» и из-за этого поссорился с Иваном Долгоруким, который вместе со своим приятелем, поручиком Овцыным, избил дерзкого бумагомарателя. Доносу Тишина, в котором описывались не только «непристойные речи» князя Ивана, но и говорилось о многочисленных нарушениях, как бы теперь сказали, «режима содержания заключенных», был дан ход, причем сделано было это весьма хитроумно. В Березов приехал инкогнито капитан Сибирского гарнизона Ушаков. Он познакомился с Долгорукими, горожанами, подружился со многими из них и всё, что содержалось в доносе Тишина, проверил. После его отъезда в Березов нагрянула большая воинская команда. Долгорукие, администрация и многие березовцы, водившие компанию со ссыльными (всего 60 человек!), были в одну ночь арестованы. Началось следствие. Князя Ивана посадили в земляную тюрьму. Подкупая стоящего у ямы часового, беременная вторым сыном княгиня Наталия по ночам приносила своему «сострадальцу» еду. Потом Ивана Долгорукого с другими родственниками вывезли в Тобольск, а затем Ивана отправили дальше, в Европейскую Россию, в Шлиссельбург, куда со всех концов страны доставили прочих членов этого некогда влиятельного клана. Готовилось грандиозное политическое дело против Долгоруких, хотя особых свидетельств об их преступных замыслах и действиях против Анны Иоанновны и не нашли – были только разговоры и сплетни. Но мстительная императрица помнила 1730 год и решила рассчитаться с бывшими олигархами. Доносчик Тишин получил повышение и шестьсот рублей награды, которые и погубили его: он спился.