zipファイルを解凍したら、気に入ったアイコンファイルを、XOOPSのhtmlフォルダ直下にあるfavicon.icoファイルと入れ替えるだけで、アドレスバーに上記のようなアイコンが表示されるようになります。
同梱のアイコンの種類については、同梱のmemo.txtを参照してください。