Инструменты: компасы, солнечные часы, циркули, «машина жестяная, что ставят у водных ключей».

Библиотека составляла 400 томов.

В Россию Абрам Петрович вернулся в январе 1723 года. Пётр I сразу привлёк его к строительству укреплений Кронштадта и к проектным работам в Риге. В следующем году венценосный покровитель произвёл любимца в поручики бомбардирской роты лейб-гвардии Преображенского полка.

После смерти своего благодетеля Абрам Петрович обратился к научным занятиям и преподавал математику наследнику престола великому князю Петру Алексеевичу. Новой владычице России, Екатерине I, он преподнёс рукопись учебника по геометрии и фортификации. Свой труд Ганнибал сопроводил следующим посвящением: «Яко во всех делах Петра Великого наследнице».

Но Екатерина I не задержалась на троне. При взошедшем на престол малолетнем царе Петре II в силу вошёл А. Меншиков. Абрам Петрович оказался среди противников временщика и был удалён из столицы. Сначала в Казань, затем последовали Тобольск, Томск и Селенгинск. Из далёкой Сибири Ганнибал взывал к милосердию: «Понеже мне ныне, будучи у дел его императорского величества, без жалованья питатца нечем и за недачею жалованья не умереть бы голодною смертию».

К счастью для Абрама Петровича, Пётр II тоже недолго царствовал. Новая императрица Анна Иоанновна вернула Ганнибала из ссылки и дала ему чин капитана Инженерного корпуса.

В возрасте тридцати пяти лет Абрам Петрович женился на Евдокии Андреевне Диопер и уехал с ней в Пернов (ныне Пярну), где было его новое место службы. Брак оказался неудачным: красавица гречанка родила белую девочку, которую Ганнибал отказался признать своей дочерью, но оставил её при себе, назвав Поликсеной. Девочка получила хорошее воспитание, вовремя была выдана (с богатым приданым) замуж, но никогда не видела сомнительного отца. Что касается подкачавшей супруги, то Абрам Петрович с ней развёлся и заставил постричься в монахини.

21 мая 1733 года Ганнибал, ссылаясь на увечья, «принятые от чрезвычайно трудных походов», вышел в отставку и поселился на мызе Каррикуля Ревельского уезда. Там он женился второй раз. Его избранницей была шведка Христина фон Шебер, родившая арапу Петра Великого кучу чёрных детей.

В отставке Абрам Петрович жил на пенсию сто рублей в год. Содержать на эти деньги многодетную семью было трудно, и 3 ноября 1740 года он обратился за помощью к всесильному графу Б. Х. Миниху:

«В великой надежде припадаю к стопам вашим слёзно повелеть явить со мною Божеское милосердие. Чтоб я был награждён по единому высокому милосердию Вашего Высокографского Сиятельства моего Высокого патрона и Государя: пожаловать мне и детем моим в вечное владение деревнишку мужиков восемь ис коронных в Ревельском уезде.