p2で書いているときの話をしているなら
p2はサーバ側に忍法帖が保存されるから任意の忍法帖に変更はできないよ。

「Cookie制御」はBBS直接投稿（p2を使わない投稿）の場合のみの機能。