Великий князь Алексей Александрович был одним из сыновей императора Александра II и императрицы Марии Александровны. Четвертый сын императорской четы сразу при рождении был записан в лейб-гвардии Преображенский полк. А в возрасте 7 лет получил морской чин мичмана и заодно гвардейский чин прапорщика. Но здесь нужно сказать, что в десятилетнем возрасте Алеша проходил практику на морских судах под руководством контр-адмирала Константина Николаевича Посьета. В возрасте 12 лет уже стал подпоручиком, а в 16 лет уже стал лейтенантом флота и гвардии поручиком. Первое серьезное испытание у Алексея произошло в возрасте 18 лет, когда в Северном море фрегат «Александр Невский» сел на мель. Были погибшие и раненые. Тогда молодой Алексей выразил категорический отказ эвакуироваться на берег первым, предоставив это право тем, кто в нем нуждался. Такое достойное мужчины поведение было отмечено и Алексей получил чин штабс-капитана. В возраст 20 лет совершил морской переход на военном судне в Архангельск и вернулся в Кронштадт уже в звании вахтенного начальника. В возрасте 21 года уже совершил серьезное плавание на фрегате «Светлана» в Северную Америку, затем Южную Африку, Японию. В возрасте 23 лет командовал гвардейским экипажем флота.
В возрасте 27 лет молодой Алексей Александрович уже участвовал в русско-турецкой войне 1877-1978 г.г., где командуя морскими командами занимался сооружением переправы через реку Дунай для переправки русских войск. Расторопность, обдуманность и своевременность действий молодого офицера не остались незамеченными. В этом же году молодой Алексей Александрович становится контр-адмиралом. С этого времени начинается его стремительное восхождение по карьерной лестнице на вершине которой находилось управление всем Военно-Морским флотом России, в том числе Адмиралтейств-совета. Однако, тяжелое испытание для великого князя Алексея Александровича произошло в ходе русско-японской войны 1905 года, где после разгрома русского флота в Цусимском морском сражении, Россия была вынуждена подписать Портсмутский унизительный мирный договор с Японией. Согласно ему, Россия уступала Японии юг острова Сахалин от 50 параллели, уступала Японии права на аренду на Ляодунский полуостров с Порт-Артуром, часть южно-маньчжурской железной дороги, признавала Корею в сфере японского влияния, и соглашалась на условия Японии по режиму вылова рыб вдоль русских берегов Японского, Берингова и Охотского морей.
Ответственность за поражение русского флота в войне было возложено на высшее командование, поэтому Великий князь Алексей Александрович был вынужден уйти в отставку и в этом же году императором Николаем II он был уволен со всех морских постов. Это было тяжелым моральным ударом для Великого князя. Он уехал в Париж и прожил там всего 3 года, где и умер. Тело было привезено в Петербург, и погребено 8 ноября 1908 года в Петропавловском соборе в присутствии императора Николая II, императрицы Александры Федоровны и вдовствующей императрицы Марии Федоровны.
Первым владельцем участка земли здесь с каменными строениями были генерал Отечественной войны 1812 года Карл Иванович Альбрехт. Другим, не менее значимым собственником был официальный устроитель официальных церемоний при дворе Александр Иванович Сабуров. Последний по проекту академика-архитектора Николая Ефимова превратил стоявший жилой дом в полноценный парадный особняк, значительно расширив его границы в период 1846-1848 г.г. В 1849 году другой приглашенный архитектор, знаменитый Гаральд Боссе пристроил флигель к особняку, изменил облик мансардного этажа, украсив его балюстрадой. К парадному входу были пристроены сени, с красиво украшенным декором фасадов. В 1872 году на 10 лет новым владельцем стал Малкиель Исаак Миронович, который владел несколькими машиностроительными заводами в Москве. Через год после смерти промышленника Малкиеля, его вдова продала особняк Дворцовому ведомству, которое приобрело особняк для Великого князя Алексея Александровича, недавно назначенного главой морского ведомства России.
В 1883 году мастер стиля эклектики, знаменитый Максимилиан Егорович Месмахер принялся за работы по переустройству особняка с целью превращения его в изящный небольшой дворец в стиле «эклектика»-«французское шато». Существующие постройки было решено оставить, а прилегающие участки выкупить с целью расширения владений. Для Великого князя как главы Морского ведомства был сделан специальный парадный вход для встречи важных гостей. В этой же части дворца были устроены Китайская гостиная с темными породами благородного дерева и китайскими фонарями и красивейшая Фламандская гостиная. Отдельно нужно сказать про самый большой зал дворца -Английский. В нем потолки были отделаны лепниной в стиле лепных плафонов Англии 16-18 в.в., двери украшены тонкой резьбой, а массивный камин украшен мозаичными вставками ручной работы. Очень изящно выглядят также отреставрированные Кабинет Великого князя, Красная гостиная, Большая столовая и др. После реставрации дворца на Мойке 122 Английский зал используется для проведения концертов.