大正6年（1917年）5月に大正天皇、皇后が行幸啓され、この折、寺内首相、松方正義、 牧野伸顯、山本権兵衛、東郷平八郎、樺山資紀等の政府高官、陸海軍の将星等が多数参 列しました。3日後、島津家では新築披露のため朝野の名士約2,000名を招待し、盛大な園遊会を開催しました。

袖ヶ崎邸は、当初伊達家の大名屋敷をそのまま使用していましたが、老朽化が進ん だため洋館を新築することを計画し、日本政府の招きにより来日して工部 大学校建築学科教授であった英国人J.コンドル氏に明治39年（1906年）に設計が 委属され、その後数度の設計変更を経て、大正4年（1915年）に建物は竣工。その後洋画家で知られる黒田清輝の指揮の下、館内の設備や調度が整えられ、大正6年（1917年）に落成披露が行われまし た。

昭和初期に金融恐慌のあおりで島津家も財政的な打撃を受け、当初2万8千坪あった敷地を昭和4年（1929年）には8千余坪を残し、周辺部を売却、その後第二次世界大戦の苛烈化に伴い大邸宅の維持が困難となり、島津家は袖ヶ崎邸も日本銀行に売却しました。
戦中、戦災を免れた邸宅は、戦後昭和21年（1946年）1月にGHQの管理下に入り、駐留軍の将校宿舎として昭和29年（1954年）まで使用されました。
そして接収解除後の昭和36年（1961年）7月、清泉女子大学は日本銀行から土地と建物を購入し、昭和37年（1962年）4月に神奈川県横須賀から大学を移転して、今日に至っています。