21岁时，罗聘和一个名叫方婉仪的女子结婚。方婉仪和罗聘是同乡，方家世代官宦，她的祖父和父亲都是通过读书而做官的，但她父亲的官做的不大，家境似乎也不怎么殷实。罗聘家境更为惨淡，能娶方婉仪为妻，是方家人凭志趣择婿的结果。结婚后，两人情趣相投，虽然粗茶淡饭，但两人不改所乐，谈书画，游山水，赋诗词，同来同往，琴瑟和谐。据说当时扬州有一名大盐商，慕名用20两银子来向方婉仪索画，被方婉仪婉言谢绝。此事在扬州传扬开去，为时人津津乐道，方婉仪的名声也由此更大。
当时扬州有个盐官，名叫卢雅语，财大气粗，一般人很难跨进他家的大门，但此人附庸风雅，对达到一定“级别”的书画名人，则网开一面，很多书画名流为能受到卢雅语的邀请而感到荣幸，而罗聘则是可以随便进出卢家的贵客。种种场面的抬举，使得罗聘在当地名声鹊起。当时，活跃在扬州的书画界名流如郑板桥等，都对罗聘刮目相看，尤为重要的是，“八怪”之首——金农，也对罗聘的画作特别垂青。
