早期發展
早在 1932 年,童子軍運動已在長洲活動,最早由長洲官立學校張校長所創立,旅長周覺識先生主持,旅號為香港第 18 旅;及至二次大戰,所有童軍活動停止。
響應總會號召
1945 年,二次大戰結束,於新學年復課後,所有童軍活動亦再次恢復。隨著時局穩定,童軍運動於五十年代,迅速發展,旅團亦相繼成立。1953 年,長洲官立中學蘇校長響應香港童子軍總會的號召,組織長洲第一旅童軍,是為離島童軍之始。繼後有長洲公教海童軍第一旅於 1954 年成立,長洲第二旅(慈光小學)及長洲第三旅(國民學校)亦於 1958 年成立等。
離島區總部及區務委員會
1953 年,位於南一幅佔地八千方呎土地,獲政府撥作童軍訓練及動之用, 是為早期長洲離島區總部的前身。而經過熱心人士的努力籌備,1956 年籌建「長洲離島區總部」,位於長洲東灣之濱(即現時華威酒店現址),面積四百方呎。並於 1958 年 7 月 27 日由香港總監高本先生主持啟用禮。1961 年,維多利亞區劃分為三區,而長洲被劃分為長洲及離島區(包括長洲、大嶼山、喜靈洲及大澳);會務亦於是年由譚恩慶先生為主席,籌組區務 委員會;並於 1962 年成立「長洲離島區分會區務委員會」。日益發展的童軍運動,舊有的區總部未能配合所需訓練之用;爰於 1976 年秋, 得離島理民府在長洲山頂運動場道撥地四千五百方呎,興建成一座共有一千二百方呎的新總部,並正式命名為「離島區童軍總部」。
撥入新界地域
1972 年,長洲離島區再次跟隨行政架構的劃分,更改區號為港島地域西離島區,屬下的旅團旅號亦於是年 1 月 1 日由長洲旅號改為港島旅號。隨著童軍運動 的急劇發展,港島地域亦作出多次規劃上的更改。於 1973 年,西離島區改稱為離島區,並轉為隸屬於新界地域的大家庭至今。