在齐白石门生之中，娄师白应是从师时年龄最小的。1932年壬申岁，娄师白的父亲娄德美在北京香山与齐白石邂逅，以同乡之谊结为朋友。
那年娄师白14岁，时常帮长辈去齐白石家办些事，有机会看到齐白石作画。两年后，齐白石有一次到娄家，见到娄师白画的十几个扇面，很高兴，说“你们这个孩子胆子很大，敢画，笔墨很像我，我愿收他做徒弟，好好教教他，我们两家‘易子而教’如何？”那年立秋前一天，娄师白向白石老人行了拜师礼。此后二十七年间，娄师白一直随侍老师左右。齐白石以指导临摹的方式教导学生，少年娄师白不几年功夫，画艺大进，临摹老师作品竟能达到乱真地步。有一次琉璃厂的画店来人取齐白石的画，齐尚未画出，来人见到侧案上摆着娄师白作品，以为是齐白石画的，一定要从中取走两张。事后齐白石为其中的一幅《青蛙芦苇》题：“少怀弟能乱吾真，而不能作伪，吾门客之君子也。”齐白石认为“娄生少怀不独作画似予，其人之天性酷似，好读书不与众争，亦不为伍”，对他表现出超乎师生关系的父子情结：“娄君之子少怀之心手何以似我，乃螟蛉乎”，视娄师白为义子。
1936年，齐白石赴四川五个月，把北京的家委托给娄师白看管，并替他到北平艺术专科学校代课。娄师白原名绍怀，少怀、师白之名也是老师给起的，娄师白曾在文章中讲过其过程：“老师为我刻名章时，把绍怀的‘绍’改成‘少’。他说‘老者安之，朋友信之，少者怀之’。‘少’字比‘绍’字更好些。刻完名章，老师又为我刻号，他说：‘燕生这个号太俗了，你跟我学画，学得很像了，将来变一下，必能成个大家。他日有成，切莫忘记老师。我给你改个号叫师白吧!’”“少者怀之”语出《论语·公冶长》，记孔子与学生颜渊、子路在一起各言己志时的夫子自道。子路请老师讲自己的志向，于是孔子讲了那几句话。《论语注疏》中解释说：“怀：归也。言己愿老者安，己事之以孝敬也；朋友信，己待之以不欺也；少者归，己施之以恩惠也。”
