Respondendo a minha pergunta. Tem como sim, basta pegar os pacotes de sua lingua, criar um diretório languages dentro de wp-content e colocar o pacote de sua linguagem. Depois em wp-config.php edite a linha define (‘WPLANG’ para sua linguagem.
define ('WPLANG', 'pt_BR');
Não percebi nenhuma diferença do pacote do WP já disponibilizada para minha lingua e do WP em inglês, apenas a tradução. Não percebi nenhum widget que tinha em um e não tinha em outro.
Mas o problema mesmo assim persite, não posso utilizar o Widget RSS, pois o mesmo está somente exibindo uma mensagem de erro. Dizendo que não pôde encontrar feed na url passada. Erro de RSS: A feed could not be found at http://meublog.intranet/blog/feed/ .
Como solução alternativa para visualizar os ultimos posts do mesmo site existe o Widget na versão 3.0.4 “Tópicos recentes”, porém para visualizar os posts de um outro blog na mesma instalação por exemplo, não vai ser possível.