Подскажите, как выглядит правильный robots txt для wordpress

можно скопировать роботс у сайта в топе, вообще лучше все у них копировать, структуру, навигацию, фишки, чтобы велосипед не придумывать

В принципе, верно. Если включено ЧПУ (плагин rus-to-lat и структуру ссылок "название поста), то надо включить строки с использованием знака "?".
Disallow: /*?*
Disallow: /*?
Если ЧПУ не включено, эти строки не использовать.

(где точки между строками - это пробелы)

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /comments
Disallow: */comments
Disallow: /index.php?s=
Disallow: */trackback
Disallow: /*?*
Disallow: /*?
Disallow: /*?replytocom
Disallow: /tag/
Disallow: /page/
Disallow: /201*/
Disallow: /author
.
User-agent: Yandex
Crawl-delay: 5
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /comments
Disallow: */comments
Disallow: /index.php?s=
Disallow: */trackback
Disallow: /*?*
Disallow: /*?
Disallow: /*?replytocom
Disallow: /tag/
Disallow: /page/
Disallow: /201*/
Disallow: /author
Host: site.ru
.
User-agent: Googlebot-Image
Disallow:
Allow: /*
.
User-agent: Mediapartners-Google
Disallow:
Allow: /*
.
Sitemap: http://site.ru/sitemap.xml

Кстати, написал давно заметку про правильный роботс для вордпресса - http://vituson.com/optimizaciya-wordpress-kak-sostavit-pravilnyj-robots-txt/

у меня такой http://mobpom.ru/robots.txt

ПРАВИЛЬНЫЙ РОБОТС ДЛЯ ВОРДПРЕССА:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: site.ru

Sitemap: http://site.ru/sitemap.xml

а как запретить индексацию виджетов ?

Disallow: /wp-content/themes
Этого делать не нужно

http://wordpresslandija.ru/robots-txt-dlya-sajta-wordpress-rekomendacii-poiskovym-sistemam.html