吴湖帆和潘静淑都出生于姑苏的名门望族。吴湖帆祖父吴大澂为晚清大吏，同治年间进士，精鉴赏，富保藏，对金石书画颇有研讨。吴湖帆从小受家学熏陶，热爱绘画，描摹了许多历代我们名迹，有坚实的绘画根底。早年与溥儒被称为“南吴北溥”，后与吴子深、吴待秋、冯超然在画坛有“三吴一冯”之称，是一位集绘画、鉴赏、保藏于一身的我们。潘静淑更是出生于姑苏显赫的潘家，曾祖潘世恩为乾隆年间状元，道光时位至宰相。伯父潘祖荫是咸熟年探花、光绪朝军机大臣。潘静淑是三品刑部云南司郎中潘祖年的次女，这位官宦人家的千金自幼饱读诗书，遭到杰出的教育，不喜外交应付，却拿手诗词丹青，是一位娴静文雅的名门闺秀。吴潘两家本来就相识并且相交甚好，潘祖荫和吴大澂都好保藏，两人来往频繁，常常经过书信互通信息，联系十分亲近。所以在吴湖帆和潘静淑很小的时分就被家人订下了娃娃亲。

　　1915年，23岁的潘静淑嫁给了小他两岁的吴湖帆为妻。婚后两人相知相守，夫妻情深更是羡煞旁人。而吴家和潘家的联婚，也是两个保藏世家藏品的结合，丰盛的保藏为吴湖帆在书画发明和保藏鉴赏方面发明了很好的条件，一同也效果了吴湖帆潘静淑配偶在画坛上的位置。