Bergbräsma växer på blottade, tunna jordlager i kustnära hällmarker, steniga torrbackar och naturbetesmarker. Man finner den också som ogräs i planteringar och rabatter i trädgårdar, på kyrkogårdar och i parker. Vissa år förekommer den liksom andra små ettåriga växter i stor mängd. Bergbräsman har ökat både i frekvens och i utbredning sedan förra inventeringen, åtminstone delvis beroende på att ogräsformen kommit in med plantskoleprodukter.