Refsnes er den fattigste og største bydelen i Svenseid. Her foregår byens crackdealing, i tilleg til den store fiskeindustrien.
Viktige gater i Refsnes er : Crack Street, Bowler Street, Treetop Street og Fishtown Avenu
På stranda Silver Beach som danner Refsnes grense mot Stillehavet, finner du ofte fiffen fra Bjerva, og her går også Svenseids partygate Boardwalk.