诗仙堂是由日本诗人石川丈山於1641年宽永十八年所创建。他本来是爱知县东部的武士，早年出仕德川家，受到幕府德川家康的器重。不过后来在1615年大阪战役时，因求功心切，竟违反军纪，私自登城杀入敌境，结果战后被贬，成為失业的武士浪人，隐居於比叡山麓，专心学习茶道、书法及文学等，尤其喜好汉诗。

　　因此在晚年创建诗仙堂时，就模仿日本「三十六歌仙」的作风，从中国汉魏到唐宋的歷代诗人中，选出36位具有代表性的诗人作為诗仙，并依据记载，绘製36诗仙的图像，然后连同诗篇刻在原木版上。这些图像全部被安排在书院的正中和左右两侧的内壁上。这些诗仙包括杜甫、李白、王维、苏軾等。