《廬山圖》是大千先生應在日本橫濱經營「重慶館店」的日本僑領李海天之請而畫的。李海天喜歡收藏字畫，但只收張大千一人的作品。當時李海天與美國的「假日酒店」總公司簽訂了一份連鎖經營合約，由李海天在橫濱興建一所高級觀光飯店，納入「假日」系統。在酒店工程設計時，李海天決定酒店內的美術設計，將是清一色的張大千書畫。美中不足的是，酒店大廳入口處設有高一公尺半，長八公尺多的一道作為屏門的照壁，給入店旅客的第一印象，要是不掛上張大千的畫，便無法顯示以「清一色」張大千作品的初衷。李海天最初想過用他舊藏的四幅張大千畫的四季花卉來填此空間，可是掛起來卻深感不夠氣魄，要是能有一整幅的潑墨潑彩山水，便足以震懾全場，使人目眩神移了。
李海天想來想去，只好請大千先生動筆了。但其時大千先生已是八十開外，深感難於啓齒。正在躊躇之際，卻與旅日名記者黃天才不期而遇，於是便相偕訪摩耶精舍。到了摩耶精舍，張大千剛午睡起來，精神飽滿，意興極高。賓主縱談之際，話題轉到李海天興建中的新旅館，大千興致勃勃的說：「我該給你畫個甚麼作賀禮？你出個題目吧。」海天初作謙辭，大千一意追詢，李海天鼓足勇氣，說出了他所亟盼的東西。大千沖口問道：「那是要畫一整張的了。」李海天不說「固所願也，不敢請耳，」卻說「大畫不好畫，先生高齡，身體也不比從前……」大有激將味道。大千聽了頗為光火，一挺腰桿，把鬍子往上一掀，以堅定的語氣接受挑戰：「我就給你畫這張大畫，也要大家看看我張大千到底老不老。」這倒不是老人一時意氣，而是李海天的話正好觸着他的隱痛，因為當時台港兩地大千的假畫充斥，傳說：「大千先生身體不好，近期的畫，多是代筆。」大千先生正是要借此機會澄清流布的傳言。