大旗會是姚北一帶龐大的農(nóng)民組織，相傳已有三四百年的歷史。

明嘉靖年間，浙江沿?！獛?，經(jīng)常有倭寇上岸搶劫騷擾，沿海百姓吃足苦頭。民族英雄戚繼光帶兵抵抗，多次打敗倭寇。后來戚繼光率兵駐守鎮(zhèn)海，使倭寇無法進犯?！昵锾?，倭寇打聽到余姚黃家埠、臨山衛(wèi)海防守空虛，便乘機偷襲。正在海上捕魚的姚北漁民，遠遠望見幾艘形跡可疑的海船朝海岸駛來，料知倭寇竄犯，急忙回船登岸，向鄉(xiāng)親們鳴鑼報警。

這時，戚繼光在前線也得到情報，想調(diào)兵回擊已來不及了。急命一將軍火速飛奔姚北，如此這般地叮囑一番，叫他按計行事。姚北的鄉(xiāng)親們正在著急，忽見—將飛馬趕到，紛紛圍上去問計。那將軍二話沒說。從懷里掏出一面繡著“戚”字的大旗，叫人懸掛起來，傳諭家家戶戶拆下被面床單，全部扎成旗幟。再搬出往日迎神賽會的鑼鼓號鈸、銅銃鐵炮，帶上鋤頭扁擔，分頭向海邊集結。

霎時，整個姚北平原號聲四起，千家萬戶，人山人海，各色各樣的旗幟遮天蔽日，鑼鼓銃炮和喊聲震滅動地，人人手執(zhí)器械，浩浩蕩蕩從四面八方涌向海邊。

倭寇剛剛靠岸。正想登陸行動，忽聽號炮連天，又見旌旗遍地，為首一面“戚”字大旗赫然在目，以為中了戚家軍的埋伏，頓時嚇破了膽，慌忙返身回船逃竄。那將軍大吼—聲，一馬當先，沖到海邊，張弓拈箭，一連射倒幾個倭寇。漁民們操起撈釣、魚鏢，奮勇駕船追擊。倭寇怕被包圍，不敢應戰(zhàn)，急得紛紛棄船跳海，全部葬身魚腹。

鄉(xiāng)親們一舉殲滅倭寇，奪得船只，一路扛著旗幟。歡歡喜喜鳴鑼放炮，慶祝勝利。沿路各村群眾，高高興興搬出茶水酒食來慰問。后來，大家為了紀念這次扎旗抗倭的勝利，繡了十丈高的大旗，興了個“大旗會”，平日組織青年練功習武，以防倭寇再犯。

大旗會的主要成員是姚北沿海一帶的農(nóng)民和漁民，幾百年來，會員代代不斷。如臨山有成員三十人左右，人人會武功，武藝最高者為頭哥(首領)。主要經(jīng)費靠田產(chǎn)收入和募集(開始時是成員輪流給富裕人家打工收入和募捐，后置出產(chǎn))。

泗門鎮(zhèn)的大旗會共有主旗一張，大旗四張，小旗十余張。主旗高十丈，大旗高六七丈，均為三角形狀，全白色。十余張小旗為三角彩旗，有的還繡龍圖等。

大旗會在姚北一帶，每逢秋天時節(jié)，大家扛起大旗，年輕人扮成英雄武士，敲鑼打鼓，騎馬耍獅，挨村游行，示威慶祝。一連幾天，熱鬧非凡。

除此外，上虞的曹娥三月甘八、東關三月十二的岳會，大旗會都趕來參加。迎會時，主旗為首(頭哥撐主旗，另有四人用繩子拉住)，隨后是大旗、彩旗、高燒、頭牌、大靠(穿將士的鎧甲)、小靠(軟靠)及棒神位(東岳大帝)、跳無常者。這時沿途各村，家家準備茶點、酒飯，熱情接待，如迎賓客，形成一個盛大的會市。這會市年年如此，先后經(jīng)歷三四百年，足見其影響之大。