Como substituir os Links "Postagens mais recentes, etc" por imagens

No painel do seu blog, vá para Layout > Editar HTML.
Marque a opção "Expandir modelos de widgets".
(Substitua a "URL da imagem" pela URL da sua imagem.)

Atenção:
Faça sempre backup do seu Blog ou teste primeiro em um Blog de testes.

Para o link de postagens mais recentes:
Localize o seguinte trecho do código:

<b:if cond='data:newerPageUrl'>
<span id='blog-pager-newer-link'>
<a class='blog-pager-newer-link' expr:href='data:newerPageUrl' expr:id='data:widget.instanceId + "_blog-pager-newer-link"' expr:title='data:newerPageTitle'><data:newerPageTitle/></a>
</span>
</b:if>

Substitua tudo por:

<b:if cond='data:newerPageUrl'>
<span id='blog-pager-newer-link'>
<a class='blog-pager-newer-link' expr:href='data:newerPageUrl' expr:id='data:widget.instanceId + "_blog-pager-newer-link"' expr:title='data:newerPageTitle'><img src="URL da imagem"></a>
</span>
</b:if>

Para o link de postagens mais antigas:
Localize o seguinte trecho do código:

<b:if cond='data:olderPageUrl'>
<span id='blog-pager-older-link'>
<a class='blog-pager-older-link' expr:href='data:olderPageUrl' expr:id='data:widget.instanceId + "_blog-pager-older-link"' expr:title='data:olderPageTitle'><data:olderPageTitle/></a>
</span>
</b:if>

Substitua tudo por:

<b:if cond='data:olderPageUrl'>
<span id='blog-pager-older-link'>
<a class='blog-pager-older-link' expr:href='data:olderPageUrl' expr:id='data:widget.instanceId + "_blog-pager-older-link"' expr:title='data:olderPageTitle'><img src='URL da imagem'/></a>
</span>
</b:if>

Para o link "Início":
Localize o seguinte trecho do código:

<b:if cond='data:blog.homepageUrl != data:blog.url'>
<a class='home-link' expr:href='data:blog.homepageUrl'><data:homeMsg/></a>
<b:else/>
<b:if cond='data:newerPageUrl'>
<a class='home-link' expr:href='data:blog.homepageUrl'><data:homeMsg/></a>
</b:if>
</b:if>

Substitua tudo por:

<b:if cond='data:blog.homepageUrl != data:blog.url'>
<br/><br/><a class='home-link' expr:href='data:blog.homepageUrl'><img height='45' src='URL da imagem' width='45'/></a>
<b:else/>
<b:if cond='data:newerPageUrl'>
<a class='home-link' expr:href='data:blog.homepageUrl'><img height='45' src='URL da imagem' width='45'/></a>
</b:if>
</b:if>

É só isso! Depois de fazer todas as substituições, verifique se deu certo!