ページのタイトルが表示されるのは「title」タグもしくはアーカイブページの「タイトル（h1やh2など）」などですね。編集するファイルは「header.php」もしくは「archive.php」になります。関数にまとめておく場合は「functions.php」も修正する必要がありますので、用途に合わせて必要なファイルを編集してください。