Budowę posągu rozpoczęto w 713 roku staraniem buddyjskiego mnicha Haitonga. Posąg zaprojektowano tak, aby stał na zboczu i zwrócony był twarzą do zlewiska rzek Dadu He i Min He. Dawniej znajdowało się w tym miejscu naturalne podwodne zapadlisko, wywołujące nieprzychylne rybakom prądy rzeczne. W zamyśle Haitonga posąg miał ochraniać łodzie rybackie przed zatonięciem. W istocie odłamki skalne, odłupywane w trakcie trwającej 90 lat budowy, zasypały zapadlisko, skutkiem czego nurt rzeki stał się spokojniejszy. Wykucie wielkiego Buddy Dafo było wyczynem nie lada i pomnik mnicha Haitong, który tego dokonał stoi dziś niedaleko Dafo. Łatwej pracy nie miał. Mieszkał sobie w jaskini, a na dodatek wykuł sobie oczy udowadniając czystość intencji jakie mu przyświecały. Posąg, który postawił miał chronić przepływające na rzece statki. Położone obok wzgórza szybko zapełniły się świątyniami. Cały ten kompleks świątyń i Dafo znajduje się na Liście Światowego Dziedzictwa UNESCO.