1646 lod Henrik Thott omgive Pallisaderne med Volde af Jord. „I denne Tid (endnu i 1640) stod yderst paa Kommunen et Træ, kaldet Pratebom, som vedligeholdtes med Bænke af Veegsteen omkring af de Tydske i Leppen. Der var samme Tid under Sverresborg mod Norden nogle Vaaninger, Haver og Søboder ud paa Vandet, som da blev kaldet Buntebull. Derfra under samme Bjærg indtil Husene paa Øvregaden vare ogsaa Vaaningshuse, men som efter den Tid (før 1690) ere nedrevne og Grundene med Haverne lagt til Slottet. Kantsleren Ove Bjelke til Østraat opfyldte i 1649 Sumpen, og da Thotts Jordvolde ofte faldt ned, omdrog han dem med Steen.“
Men først i 1666 blev Bergenhus stærkt befæstet. Ligesom Byen og dens Omgivelse i den Tid blev rustet fra Top til Taa, fra Skandserne paa Fløifjældet og Lyderhorn til Strandbatterierne og Blokhusene, som fløde paa Vandet, saaledes forsømtes heller ikke Bergenhus. Paa Sverresborg, hvor der i lang Tid, rimeligvis fra 1477, havde været en Steenhob, „lod Bjelke lægge et Batteri med Stykker Vagthus, hvælvede Kjeldere og Skandse forbi Skudeviken til Rothaugen.“ Ved Kommunens Nordpynt anlagdes et Blokhus, der dog kort efter blev borttaget. Og ved Yderkanterne af selve Kommunen sattes Volde af Steen baade mod Byen, Vaagen og Fjorden. Paa den indre Side mod Byen droges en Grav. Ved senere Reparationer i 1807 og 1812 fik Sverresborgs Befæstning sit nuværende Udseende, medens Bergenhus efter flere Tilsætninger i 1752 og 1788 endelig i 1812 blev et lukket Verk.
Om Slottets Udseende i 1690 ville vi lade den samtidige Edvardsen fortælle. „Slottet har ved den indre Side til Byen et saare stort og høit Taarn af idel Kvadrat Veegsteen, der skal være bygget af Erik Rosenkrants. Bag til Kommunen er endnu tvende høie Taarne og en Runddeel, som med Mellemmure af haard Kampesteen ere sammenbundne, saa at ingen kan komme ind der. For til Vaagen ere nogle Batterier med Stykker belagte og en Deel Værelser, somme Steder af haarde Stene, somme Steder saasom nedenunder slet med Veegsteen rundenom, saa det ganske indelukker Slottet, men ovenpaa dette nogle udbyggede Karnapper af Bindingsverk og et af Træ.
