清朝末期国力衰微，在第一次鸦片战争中惨败英国，开始了半殖民地和半封建的屈辱时代。从这时开始，香港成为了大英帝国的殖民地。

在殖民时代，香港曾用过6面旗帜：

1.在1841年在失去香港岛后不久，英国殖民者就升起了大英帝国的米字旗。

2.在1871年，开始启用新旗帜，旗帜带有“HK ”字样的大英帝国皇上的王冠，此旗帜用到了1876年。

3.从1876年到1941年，从1945年到1955年，旗帜的徽标变成了阿群带路图。

4.在二战中，日本在1941年到1945年占领了香港，用的是日本旭日旗，是大日本帝国的国旗。

5.从1955年到1959年，启用了新的阿群带路图。

6.在1959年至1997年期间，旗帜徽标用的是香港盾徽，里面有狮子和龙。

1997年，香港终于回到祖国怀抱，洗清了殖民的屈辱。