東側小寨門和西北角的懸崖，這兩處的寨牆和箭樓都還容易修築，工程量不大，所以在年前剛開始施工，用了不到十五天就都建好了。只是南邊寨牆卻着實費了一番功夫，年前雖然已經修築了一少半了，可是剩下的工程量還是很大。單隻說壘砌寨牆用的石頭，都是花很大人力纔開採出來的，又要耗用人力一塊塊搬運到寨牆工地。寨子裏幾乎連婦女都參加進來，用撬棍、用繩索，一塊塊的向工地上擡。
過完年，周南就向幾名石匠和老鄭頭他們提議，現在冬季河流斷流，寨牆外面的河流連冰都沒有，只露出了河牀，讓石匠們就在溪流邊上開挖，採出巨石，再分成合適大小，就近擡到寨牆處，直接壘石築牆。這樣既能拓寬挖深護寨河，又減少了運送石塊的人工，大大縮短了南側寨牆的修築時間。原本寬僅兩丈的溪流，就會變成一人多深、四丈多寬，原來可以自由行走的山溪便不能通行了。
這樣的建議，自然得到衆人一致贊同。周南先讓石匠們在從河流邊到寨牆的這段緩坡上，開鑿出幾條平整的坡道。坡道大約有一丈來寬，至於這坡道的用處，周南告訴石匠們，就是等開採出石塊後，將石塊與坡道之間墊上粗細相同的圓木，兩個人站在石塊後面，用撬棍頂住石塊，使得石塊不會順着坡度自然下滑，另外幾人便用繩索套在石塊上，向上拉動石塊，再有一人不斷將圓木填到石塊前面，這樣一來，不用壯勞力，幾名婦女就可以搬運石塊了。把有限的青壯勞力都用到了壘砌寨牆上，這樣一來自然是大大加快了進程。
老鄭頭又趁機便提出在護城河上修建一座吊橋的想法。老鄭頭所說的修建吊橋，就是爲了日後方便寨子裏的人進出使用的。按老鄭頭比劃着解說的，在河流南北兩岸邊都打上立樁，架上橫木，吊橋平日就橫搭在南北兩岸的橫木上。吊橋在河流北岸，也就是寨牆這一側，固定在一根粗木做的軸上，保證吊橋不會錯位或者離開橫木，又方便吊橋的另一頭上下活動，再用兩根粗索固定在吊橋另一頭，粗索的另一端便與寨牆上的絞車相連。要提起吊橋，便由人絞動絞車，絞車轉動後帶動粗索，將吊橋吊起；要放下吊橋，便順勢反方向絞動，放開粗索，便可放下吊橋。平日白天有人出入的時候，吊橋是架在河上的，到了晚間，值守寨牆的兵丁便將吊橋拉起，這樣就能更好的利用他們挖出來的護寨河了，等於是在寨牆外又多了一重保障。
周南聽了老鄭頭的吊橋方案，和劉宗旺、張義等人很是贊同。周南又在地上將老鄭頭提出的吊橋草圖畫了出來，想了想，問老鄭頭道：“若來敵甚急，正絞動繩索，拉起吊橋時，被來敵射斷繩索，吊橋豈不會要重新落下？”老鄭頭一窒，也想到了周南說的情況，只是一時間卻無辦法解決，正在苦想，周南說道：“我有一個辦法，就是在吊橋北岸這一端，固定吊橋的軸上做個機關……”說到此，周南讓人叫來木作工匠，將吊橋的事情簡單一說：“吊起吊橋時，如果來敵用箭將粗索射斷，吊橋失去粗索拉力，豈不掉回去？這樣一來，吊橋便沒了用處。”那木作工匠點頭，示意聽明白了，周南接着道：“如果在固定吊橋的橫軸上設置機關，保證粗索被來敵砍斷，吊橋也不會掉下，豈不是加固了吊橋？”
周南道：“只須在吊橋橫軸這一端，設置一個類似門栓的東西，讓橫軸只能沿一個方向轉動，反方向轉動便會被絆住，這樣即使拉動吊橋的繩索被砍斷，也能保證吊橋不能下墜。”
那木作工匠立即說道：“大寨主如此說，小的便明白了，這便去做。”
老鄭頭也點點頭道：“大郎確是心思靈巧，倒似比我老漢還要經多見廣。”周南說道：“一個人想一件事情，總是不如幾個人一起想的周全。待寨牆完工後，我們再幾次設想和演習，力爭找出更多疏漏，再做相應修繕和改進，便可讓我等這山寨固若金湯了。”
終於，兩個月後，山寨的全部寨牆便完工了。這三處寨牆，總計約有一百七十餘丈長，高約三丈，寨牆上有箭垛、箭樓，南面正門處的寨牆更是每隔一段距離就修建一處突出的馬面牆，大大增強了寨牆的立體防禦能力。光是挖深拓寬的寨牆外的河流，就能看出費了無盡的人工了。
這寨牆、護寨河，在這山寨內可以說是工程浩大了，即便放眼整個五寨嶺，也是絕無僅有的，更不是臥虎山那種簡陋山寨可以比的。寨牆完工後，周南對高遠、老鄭頭、劉宗旺等人提出，在高家寨的地勢最高處，也就是寨子的西北角那裏，修建一處望旗臺，旗臺北面，修建了一處議事堂。議事堂作爲全寨人集會、議事、指揮全寨防禦的地方，議事堂前平整寬闊，足夠容納上千人。望旗臺上高高的旗杆上的旗幟，整個山寨都能看到。在劉宗旺、高秉常、張義等幾位老人的建議下，將原先寨中的那座小山神廟也搬遷到了議事堂旁邊。將山神廟配置在全寨最高的位置，也是幾位老人期望着山川大神能保佑全寨吧。對此周南也不反對，畢竟現在這時代，讓山裏的百姓接受無神論不太可能，何況，這山神廟也能有凝聚人心、評判是非的功能。
周南此時絕不會想到，一年後，高家寨的人能順利脫險，還真的多虧了這山神廟。
又多用了半個月，纔將議事堂、望旗臺、山神廟建成。直到現在，寨牆、護寨河、議事堂、望旗臺、山神廟，這些設施和場所建成後，高家寨這無憂寨纔算是真正建成。單憑寨內幾百人，估計要一年多的時間才能大體完成。能修建這麼快，虧得周南又讓人四處重金聘請工匠，僱傭其他山寨的人來做工。高家寨的庫中，還有大把的金銀銅錢，不愁沒錢僱人。三個月的時間，將寨牆完成，計算用工酬金，才花去兩千貫銅錢。
高家寨建成之日，老鄭頭拿出早已刻好的“無憂寨”三個字的石匾，在全寨老幼和外寨來做工的人的注目下，鄭重的講石匾掛在了寨門上方。人羣頓時歡呼雀躍起來，更有拿出準備好的鞭炮放了起來。高家寨的人高興的是從此再不怕山賊強盜欺凌了，別的寨子的人眼熱之餘，更是思忖着如何回去也建個自己的寨子。更有心切的，來找劉宗旺、張義等人詢問能否加入高家寨。