乐山大佛景区规模不大，景区内除大佛之外，还有凌云禅院、灵宝塔、载酒亭、苏园、东坡楼等小景点尚可一看。其中苏园、载酒亭、东坡楼都与苏东坡有渊源，甚至乐山市区内还有东坡路，那么乐山大佛与苏东坡究竟有什么关系？
苏轼是四川眉山人，地理上眉山距离乐山不过4、50公里，历史上眉山曾属嘉州（乐山），直到1997年眉山县还属于乐山市代管，出身上似乎有点联系。但苏轼终其一生，有据可查的只是路过乐山大佛游玩过一次，所以说也没有太大的联系。乐山有关苏东坡的传说大多是后人编造的。
北宋嘉佑四年（公元1059年），当时二十多岁的苏东坡曾与父亲苏洵和弟弟苏澈同游乐山大佛所在的凌云山，此后不久出川参加科举考试，虽然后来又因父母去世两次回眉山守孝，但并没有再游乐山大佛的记录。
不过，苏东坡对乐山的风景还是念念不忘的。三十多年后，苏东坡做杭州太守时，一位姓张的朋友要去嘉州做太守，苏东坡就写了一首《送张嘉州》相送，首四句是“生不愿封万户侯，亦不愿识韩荆州。但愿身为汉嘉守，载酒时作凌云游。”这头两句看似是揶揄李白。因为李白年轻时曾写过一首“生不用封万户侯,但愿一识韩荆州”献给一个姓韩的荆州官吏，虽然貌似真诚，但其实还是在拍“韩荆州”的马屁，表达了求荐做官的意愿。苏东坡则更潇洒，连“韩荆州”也不愿意去结识，只想去做汉嘉守（即嘉州太守），这样就可以时常到凌云山喝酒游玩了。
只因这一句诗，后人便在现在景区的山路上盖了一座“载酒亭”，明代嘉州知事郭卫宸更在旁边手书了“苏东坡载酒时游处”几个大字。其实苏东坡到乐山只有“一游”，从未“时游”过。
至于大佛景区内的东坡楼，传说苏东坡曾在读书生活。但此处原本曾是明朝魏忠贤为自己建的生祠，后来魏倒台，就将祠改为纪念苏东坡的东坡楼。苏东坡并未在此读书生活过，所谓苏东坡在此求学、苏东坡在此教龙王三太子读书等民间传说也都是群众创造的。
东坡楼横匾上的三个字是从黄庭坚的手迹中收集来的。黄庭坚是苏轼的学生，“苏门四学士”之首，也是北宋文坛、政坛著名人物，因为诗歌上的造诣与苏轼合称“苏黄”，又因为书法上的造诣和米芾、蔡襄四人共称“苏黄米蔡”。1100年，黄庭坚在贬官戎州（今宜宾）期间曾到老师苏东坡提到过的乐山大佛游玩，并在此地留下一首《 凌云纪游 》。
“凌云一笑见桃花，三十年来始到家。
从此春风春雨后，乱随流水到天涯。”
也许是一语成谶，诗成一年之后，贬居海南多年的苏东坡收到朝廷恩准北归，途中病逝于江苏常州。四年之后，黄庭坚在更加遥远偏僻的广西宜州去世。
