Его построили ещё в 1859 году, когда Литейная часть только начинала становиться элитным районом города — потому что была пригородной магистралью, где селились богачи. Но не прошло и 20 лет, как особняк перепродали Константину Варгунину, петербургскому промышленнику, который подарил особняк своей дочке Оле. Та, в свою очередь, сделала из особняка приёмную самых сливок России. Благодаря репутации крутейшего адвоката у её мужа, в их дом часто приходили такие люди, как Керенский, Плевако, Павлов, Шаляпин, Кшесинская и другие. После революции особняк превратили в больницу, которая существовала почти 100 лет — в 2008 году особняк отреставрировали и сделали новым культурным пространством города!