本來，考察完廣勝寺，他們此行的任務也就算結束了。可翻閱趙縣縣誌時，他們卻意外地發現縣誌上記載著，在城東三十里的霍山中，有座建於唐代的興唐寺。從地圖上看，興唐寺距廣勝寺只有２０裡。可後來一打聽才知道，從廣勝寺到興唐寺無路可走，必須下山繞行，再折回霍山嚮東上山２０裡，才能抵達。不過，既然已經到了這裡，又是一座他們久欲尋覓的唐代建築，豈能白白放過。於是他們完成廣勝寺的考察後，未事休整，就向興唐寺出發了。
離開廣勝寺下山，是早上９點。他們在蜿蜒的山路上行走了整整一天，等到重新進山時已是晚上９點！山谷里黑黢黢的，山風四起，前面的峰巒迫近如巨大的屏障。天空被山峰擠得狹窄，狹窄的天空上有一兩顆星星鬼魅地閃著亮。徽因、思成和費正清夫婦徒步行走在山路上，腳夫趕著騾子馱著行李落在了後面。他一隻手牽著騾子，一隻手摸索著山岩，只聽他不停地叨咕著：“菩薩保佑。”思成、徽因累得說不出一句話，黑暗中只聽見彼此沉重的喘息。但他們不敢停下來歇息，因為他們知道，一旦停下，就可能一步也不願意往前走了。路，越走越難。山崖上危石錯落，枯枝橫斜，遠遠地望見松柏間隱隱約約的燈光，他們以為已到了目的地，一鼓作氣到了燈光處。看上去這裡是一座廟，進得廟裡，寺僧告訴他們，這裡是霍山的山神廟，離興唐寺還有好幾里路。一行人洩了氣，只得將錯就錯地在這裡住下。
第二天，他們趕到了興唐寺，所有的希望全成了泡影。興唐寺雖然藏在深山，卻不知毀於何時。現在的寺院全是後來重建的，不土不洋的廟門，幾座清式的小殿，殿中的塑像很小氣，有的還加了玻璃罩，看上去十分鄙俗。整座興唐寺沒有一樣建築值得考察記錄。這樣的事情在考察中並不是第一次遭遇。常常是聽說某處有如何如何一座古建築，待千辛萬苦地趕了去，結果是大失所望，敗興而歸。
這一路他們也不算白跑，沿途，他們考察了山西的民居。黃河流域一帶的農民多居住在窯洞裡，可令費正清夫婦驚奇的是，和那一排排窯洞相對峙的卻是一座座威嚴、整肅的門樓和大院。這樣的大院一個莊子有兩三處。思成、徽因告訴他們，這些大院是１９世紀在中國金融業產生過巨大影響的晉商———靠開錢莊、倒騰匯票發家的山西商人們的住宅。在費正清和費慰梅眼裡，狹窄街道上這些排列整齊、有著雉堞高牆的院落，活像是中世紀意大利城市建築的移植。
他們一行走到靈石縣常家莊，住進了一家大院。走進高高的圍牆，裡面是上下兩層、里外四進的院落。天井的四周雕樑畫棟，廊簷部分是繁複的木雕，院子的深處還有個封閉的後花園，雖說是假山假水，卻也一應俱全，令人遙想晉商們當年的氣勢。
徽因不喜歡這樣的建築。這裡的一切都有著陰鬱、森嚴的氣息。高築的院牆，佈滿陰影的房間，看上去充滿了警惕和敵意，那是一種暴富之後面對隨處可見的、令人絕望的貧窮和差距所產生的恐懼和敵意。陰森森的院落裡，狹長的青石甬道顯得逼仄而緊張，毫無變化的一進進院落顯得單調而沉悶。在這樣的建築空間和精神空間裡，怎麼會有施福鄉里、惠澤後代的胸懷？怎麼會產生現代的生活理念和經營理念？難怪這些當時富甲天下、不可一世的晉商們會無聲無息地湮滅在歷史的長河中。