文人画的由来可以追溯到汉代，张衡、蔡邕皆有画名。画品虽不传世但是典籍皆有所记载。魏晋南北朝时期，姚最“不学为人，自娱而已”成为文人画的中心论调。使历代文人将其尊为绘画的宗旨。
言之有物
古时的文人画不是忙三火四画出来立马就要卖钱的，而是兴之所至，信笔拈来，承载的是亦忧亦乐，表达的是真性真情。所以后人才能从八大山人的鹰眼中看出睨藐不屑来。
学养深厚
封建士大夫既是经科举制度层层选拔上来的，那么文才必须是为官的基础。要想胸有韬略，腹中需垒起万卷诗书。这样的人画出画来，不叫“文人画”也会文气十足。
格调高雅
翰墨丹青古来即称“雅好”，“雅”人之“好”的标尺，就是格调。这和画家的人品有一定的关系，但不是全部，更重要的是画家接受的教育和所处的环境。对格调的赏析与赏析者的品位有极大的关系，即俗语所说“好画还需识者看”。
文人画是一种综合型艺术，集文学、书法、绘画及篆刻艺术为一体，是画家多方面文化素养的集中体现，尤其和书法的关系更为密切。书法中的点、线和笔画间组合不但是构成艺术形象的基本元素，而且是重要的、具有独立审美价值的欣赏对象。运笔的疾徐轻重，点线的疏密粗细所形成的特有的节奏和韵律，要能体现出画家创作过程中特有的心态、气质和个性，并将这些与所表现的事物的形神有机地结合起来，做到心手相应，气力相合，迹虽断而气连，笔不周而意周。
在色彩和水墨上，文人画更注重水墨的运用，讲究墨分五色。王维之所以受到苏轼、董其昌的极力推崇，最重要的原因就是在后期创作中开水墨画的先河。文人画家所以重水墨而轻色彩，这同中国传统绘画的艺术观念和审美观念有直接关系，即传统绘画一直不曾把真实地再现事物的表象作为创作目的，而是把揭示事物的内在神韵作为最高的艺术追求。基于这种宗旨，又形成了民族特有的美学思想，即摒弃华艳，唯取真淳，讲究绘事后素、返朴归真、大巧若拙等等，这些都成为文人画家在艺术上的自觉追求。
文人画特色和体系的形成，又与文人士大夫将绘画视为精神调节手段有关，创作对这些画家来讲，起到的不过是一种精神舒络的作用，这样，不为物役，不被法拘，以最简单的工具(笔、墨、纸)，最概括的语言(黑、白、灰3色)，传达出最深切的感受，就成为创作中的必然的选择。
