なんてことはない、使っていたテーマにcategory.phpがなかっただけの話。
このファイルがないときはarchive.phpで代用するとのこと。
これもなければ最終的にindex.phpに役割が回ってくるらしい。

手軽にpage.phpあたりをコピーしてcategory.phpにしてtemplateの当該ディレクトリに配置したらばっちり表示されました。