Não precisa de plugin. Faz o seguinte, pega o tema padrão do wordpress, abre o arquivo page.php
Lá você vai entender melhor como funciona. O seu arquivo page.php tendo as mesmas tags do tema padrão, já será suficiente. Então todas as páginas que você for criar pelo painel de administração, terá como base o page.php
Vendo é melhor do que falar, abra o arquivo padrão e veja como está estruturado e as tags.
As páginas internas, criada dentro do painel do wordpress podem ser manipuladas com o html. Agora as estruturas/layout das páginas devem ser alteradas no arquivo style.css e page.php caso seu template possua single.php é importante que edite também.