А. П. Гостев в районной книге «Памяць» (2002) сообщает, что первым из упоминаемых в архивных документах владельцев Ивья является воевода Петр Станиславович Кишка.
Во второй половине XVI в. местечко перешло в собственность Яну Кишке.
Последним из Кишков им владел гетман Великого княжества Януш Кишка (1588–1654). Этот был женат на Катерине из рода Друцких-Соколинских.
Вдова Януша Кишки записала Ивье на Карла и Катерину Глебовичей. Это случилось, естественно, уже после 1654 г.
Новые хозяева Ивья передали имение своим дочкам Марцибеле Огинской (1641-81) и Кристине Сапеге. 1661 г. — год свадьбы Марцибелы на Мартьяне Огинском (1632-90) можно считать временем этой передачи. Мартьян Огинский был выдающейся личностью своего времени. Сын трокского каштеляна Александра Огинского и княжны Катерины Полубинской, он получил образование в Кракове и Лейдене. Служил в войске с 1651 г., полковник, хорунжий трокский (1654), честник Великого княжества (1658), стольник литовский (1661). Кроме Ивья, получил за своей женой титул «графа на Дубровне», а также половину самого Дубровно и Заславля. С 1665 г. — кравчий Литовский, с 1670 г. — воевода трокский (дослужился до должности отца). В 1684 г. становится канцлером великим. В 1685 г. женится на Констанции Великопольской. Участвовал в войнах против Швеции и Москвы. Во время своего владения Ивьем (до 1681 г.) построил в Смиловичах православную церковь (1668). В 1669 г., чтобы продолжить свою служебную карьеру, вынужден был принять католичество (законы Мира стары, как сам Мир).
У Марцибелы и Мартьяна детей не было. Поэтому после 1681 г. полновластными хозяевами Ивья стали супруги Кристина (из рода Глебовичей) и Казимир Ян (1642–1720) Сапеги. Венчание этой пары состоялось, когда Казимиру Яну было 24 года. С 1670 г. Казимир Ян — воевода полоцкий. В 1681 г. его назначили гетманом польным Великого княжества. В должности великого гетмана он состоял с 1683 по 1703 и с 1705 по 1708 гг. Занимал должность виленского воеводы: с 1682 по 1703 и с 1705 по 1720 гг. Трехлетний перерыв был вызван участием Казимира Яна Сапеги в борьбе за независимость Великого княжества от Польши. Сапега тогда выступил на стороне шведского короля Карла XII. В битве при Алькениках войско Казимира Яна Сапеги было разбито.
В 1686 г. Ивье получил в залог от Казимира Яна Сапеги староста купшиский и диоменский Стефан Тизенгауз (около 1640 — до 1721) за 15 тысяч талеров, которые С. Тизенгауз одолжил Сапеге. В 1687 г. Стефан Тизенгауз получил должность подстолия Великого княжества, а затем кухмистра. С 1700 г. он стал воеводой Новогрудским. После битвы под местечком Алькеники Стефан Тизенгауз и его жена Барбара из рода Шеметов решили, что Ивье теперь принадлежит им. Но К.Я. Сапега в 1709 г. сумел его вернуть. Но поскольку он так и не погасил долг в 15 тысяч, то по результатам продолжительного судебного процесса Ивье в начале XVIII в. отошло к Тизенгаузам.
Следующим за Стефаном владельцем Ивья был его сын Михаил Тизенгауз, шмельтинский староста и великий писарь. Этот был женат на Александре из рода Радзиминских-Францкевичей. Позже он выкупил Николаево в Ошмянском повете, фольварок Стенковщину около Ивья, деревни Дробыши и Карповичи. Михаил Тизенгауз умер в 1726 г. Он конфликтовал со своим сыном Бенедиктом (родился в 1700) и в порыве гнева(!) записал свои владения брату Яну (1670–1730), воеводе мстиславскому.
Ян Тизенгауз передал Ивье в наследие своим сыновьям Стефану, старосте пененскому, и Бенедикту, старосте вилькомирскому с 1732 г. Однако к чести сыновей Яна Тизенгауза те отказались от Ивья в пользу наследников Михаила Тизенгауза — Бенедикта, Антония и Каспара. Антоний к тому времени стал ксендзом-иезуитом, тем не менее, взялся яро судиться с братьями, а точнее — со своим старшим братом Бенедиктом, за свою долю от Ивья. По всей видимости, Бенедикт был, действительно, не из покладистых, потому что в результате войны этих двоих слуга Бенедикта Ягнетовский 22 февраля 1732 г. убил в Ивье наместника (лицо, защищающее права хозяина) Антония Лешчиловского. Кажется, это убийство повергло братьев в шок. Потому что в том же году они помирились. Ивье осталось за Бенедиктом, старостой шмельтинским, который был женат на Ганне из рода Биганских.
У Бенедикта и Ганны было 8 дочерей и 3 сына. Владельцем Ивья стал старший сын Бенедикта и Ганны — знаменитый Антоний Тизенгауз (1733-85), подскарбий надворный, старо ста гродненский и шауляйский. А его брат Михаил являлся старостой диоменским и был женат на Барбаре из рода Юдзинских.
Следующим за Антонием Тизенгаузом владельцем Ивья был младший сын Михаила и Барбары Игнатий Тизенгауз (около 1730–1822), шеф гвардии Великого княжества. Этот был женат на Марии из Пшездецких. У этой четы было два сына: Рудольф (1772–1830), полковник, и Константин (1786–1853), полковник и известный в свое время орнитолог.
После Игнатия Тизенгауза Ивье перешло Рудольфу и его жене Женевне из рода Пусловских. Эти имели трех дочерей: Эзефу, Германицию и Эльфриду.
В 1873 г. в качестве приданого Ивье получила Эльфрида. В тот год она вышла замуж за графа Августа 3амойского.
Члены рода Тизенгаузов с XVIII в. хоронились в склепе костела г.п. Желудок.
Юрий Якимович, самый достойный из белорусских краеведов советского времени, в своей книге «Зодчество Белоруссии XVI — середины XVII вв.» (1991) сообщает, что в конце 1598 г. в местечке Ивье насчитывалось 150 дворов. Центром являлась торговая площадь. От нее радиально расходились улицы Виленская и Новогрудская. На улице Новогрудской стояла корчма. Улица Кривая пересекалась с Новогрудской.
Еще в одну сторону от торговой площади уводила аллея. Она вела в сторону усадьбы владельца Ивье. При въезде на территорию этой усадьбы стояла деревянная четырехъярусная брама в стиле ренессанс. В первом ярусе брамы проезд закрывали спускающейся решеткой (типа герсы). Во втором ярусе размещалась часовня. На четвертом ярусе брамы находились часы с молоточком, отбивавшим мелодию. Над куполом возвышалась башенка с сигнальным колоколом.
Во дворе этой усадьбы стоял исполненный в том же стиле, что и брама, деревянный двухэтажный дворец на 14 помещений. Над вторым этажом возвышался мезонин с залом (видимо, танцевальным). В столовом зале дворца был расписной потолок, а также печь из пестрых полихромных изразцов. Внутреннюю лестницу дворца украшала скульптура.
За зданием дворца, в саду, стояла каменная баня.
Недалеко от сада располагался дом управляющего. Рядом находились конюшня, свирн, крытая соломой пекарня.
За первым садом располагался второй сад, который назывался «лабиринтом». Это был традиционный для середины XVII в. итальянский сад, предназначавшийся исключительно для развлечений. Из камней здесь был устроен грот с жилыми помещениями и даже кухней.
Далее усадебную территорию занимал пруд, за которым располагался фольварк.
В районной книге «Памяць» сообщается, что в середине XIX в. Ивьевское имение получило престижное название графства. Кроме местечка Ивье, имение включало местечко Николаево, фольварки Галимщину, Хованщину, Красовщину, Рембокавщину, Строневичи, Бочнарод, Эльвридов, Лугмилин, Борки, Чепунь, Августово и еще более 50 деревень. Центром графства было Ивье, в котором в 1861 г. зарегистрировано около 4 тысяч жителей. Половину населения составляли евреи. Немало было и татар.
В. Врублевский в районной газете «Iуеускi край» за 30 августа 1997 г. сообщает, что каменный Петропавловский костел в Ивье построен в стиле раннего барокко в 1600 г. по инициативе и на средства местного магната Станислава Кишки. Местом его прописки оказалось старое городище.