MeteorGPLby WebbingApps
P

Better Robots.txt - AI-Ready Crawl Control & Bot Governance (Premium)

Plugin
Beobachten 0 Mit Stern markieren 0
Installieren

Replace the default WordPress robots.txt workflow with a smarter, structured version you can preview before publishing, with Free, Pro, and Premium editions.

  • 0 Sterne
  • 0 Beobachter
  • 0 Downloads
  • Lizenz nicht deklariert

Versionen 0

Neueste zuerst · jede Version vor der Veröffentlichung gescannt
69 noch nicht verfügbare Versionen anzeigen

Releases, die im Changelog des Anbieters oder auf WordPress.org genannt werden und die das Repository noch nicht enthält.

  1. 3.0.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Removed Push notification popup during freemius opt-in.

    Changelog-Eintrag

  2. 3.0.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: 14-steps granular configuration process

    Changelog-Eintrag

  3. 2.0.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Freemius and dev mode issues.

    Changelog-Eintrag

  4. 2.0.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Physical file (PRO version) functionality. Recommended for PageSpeed Insights compatibility.

    Changelog-Eintrag

  5. 2.0.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: Generate a Physical file in PRO version. Recommended for PageSpeed Insights compatibility.

    Changelog-Eintrag

  6. 2.0.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Freemius SDK Security fix

    Changelog-Eintrag

  7. 2.0.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: UI/UX with better experience

    Changelog-Eintrag

  8. 1.5.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Class initialization

    Changelog-Eintrag

  9. 1.5.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: ChatGPT Bot Blocker - Block ChatGPT Bot from scrapping your content (Pro Version)

    Changelog-Eintrag

  10. 1.5.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Moved Moz bots from Bad bots list to Backlink Protector list.

    Changelog-Eintrag

  11. 1.4.7 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Removed Be part of movement against CoronaVirus (Covid-19) option

    Changelog-Eintrag

  12. 1.4.6 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: SECURITY PATCH. Verify nonce for CSRF attack.

    Changelog-Eintrag

  13. 1.4.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: PHP warning undefined index

    Changelog-Eintrag

  14. 1.4.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Security fix

    Changelog-Eintrag

  15. 1.4.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Text issues

    Changelog-Eintrag

  16. 1.4.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Bugs and improvements

    Changelog-Eintrag

  17. 1.4.1.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Sitemap issue

    Changelog-Eintrag

  18. 1.4.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: Search engine visibility feature (Pro version)

    Changelog-Eintrag

  19. 1.4.0.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIX: Added trailing backslash for using trait

    Changelog-Eintrag

  20. 1.4.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Refactored code to MVC

    Changelog-Eintrag

  21. 1.3.2.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: Meta Tags for SEO promotion

    Changelog-Eintrag

  22. 1.3.2.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Added some more rules for Woocommerce performance

    Changelog-Eintrag

  23. 1.3.2.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Tested up to WordPress v5.6

    Changelog-Eintrag

  24. 1.3.2.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Update Freemius to v2.4.1

    Changelog-Eintrag

  25. 1.3.2.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIXED: Call to undefined method error.

    Changelog-Eintrag

  26. 1.3.2.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🐛 FIXED: XSS vulnerability.

    Changelog-Eintrag

  27. 1.3.1.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Admin Notices are set to permenantly dismissed based on user.

    Changelog-Eintrag

  28. 1.3.0.7 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    🔥 NEW: WP Google Street View promotion

    Changelog-Eintrag

  29. 1.3.0.6 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    👌 IMPROVE: Updated freemius to latest version 2.3.2

    Changelog-Eintrag

  30. 1.3.0.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added option to Be part of our worldwide Movement against CoronaVirus (Covid-19)

    Changelog-Eintrag

  31. 1.3.0.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed php notice (in php log) for $activetab variable

    Changelog-Eintrag

  32. 1.3.0.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed php notice (in php log) for $hosturl variable

    Changelog-Eintrag

  33. 1.3.0.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed some security issues

    Changelog-Eintrag

  34. 1.3.0.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    VidSEO recommendation

    Changelog-Eintrag

  35. 1.3.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added 5 new rules to default config. Removed 4 old default rules which were cuasing some issues with WPML

    Changelog-Eintrag

  36. 1.2.9.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed Undefined index error while saving MENUS for some sites

    Changelog-Eintrag

  37. 1.2.9.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Updated Freemius SDK v2.3.0

    Changelog-Eintrag

  38. 1.2.8 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Notification will be disabled for 4 months. Fixed some other minor stuff

    Changelog-Eintrag

  39. 1.2.7 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added Baidu/Sogou/Soso/Youdao - Chinese search engines features for pro users

    Changelog-Eintrag

  40. 1.2.6.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed some text

    Changelog-Eintrag

  41. 1.2.6.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed Yoast sitemap issue for Multisite users

    Changelog-Eintrag

  42. 1.2.6.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed Multisite Issue for pro users

    Changelog-Eintrag

  43. 1.2.6 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Security patched in freemius sdk

    Changelog-Eintrag

  44. 1.2.5.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed a minor issue

    Changelog-Eintrag

  45. 1.2.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed crawl-delay issue

    Changelog-Eintrag

  46. 1.2.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed a bug

    Changelog-Eintrag

  47. 1.2.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added "Hide your robots.txt from SERPs" feature

    Changelog-Eintrag

  48. 1.2.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Fixed some bugs creating error in google search console

    Changelog-Eintrag

  49. 1.2.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added multisite feature for directory based network sites (pro only). it can duplicate all default rules, yoast sitemap, woocommerce rules,...

    Changelog-Eintrag

  50. 1.2.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Added Post Meta Box to Disable Indivdual post, pages and products (woocommerce pro only). It will add Disallow and Noindex rule in robots.tx...

    Changelog-Eintrag

  51. 1.1.9.6 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added 150+ growth hacking tools

    Changelog-Eintrag

  52. 1.1.9.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added clean-param for yandex bot

    Changelog-Eintrag

  53. 1.1.9.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed default robots.txt file issue upon plugin activation for first time

    Changelog-Eintrag

  54. 1.1.9.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed readability issues

    Changelog-Eintrag

  55. 1.1.9.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    boost your site with alt tags

    Changelog-Eintrag

  56. 1.1.9.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed a bug in disallow rules for woocommerce

    Changelog-Eintrag

  57. 1.1.9 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added new feature: loading performance for woocommerce

    Changelog-Eintrag

  58. 1.1.8 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added new feature: xml sitemap detection

    Changelog-Eintrag

  59. 1.1.7 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added new feature: Top plugins for SEO performance

    Changelog-Eintrag

  60. 1.1.6 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added russian and chinese (simplified) languages

    Changelog-Eintrag

  61. 1.1.5 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added feature to detect physical robots.txt file and delete it if server permissions allows

    Changelog-Eintrag

  62. 1.1.4 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added new "personalize your robots.txt" feature to add custom signature

    Changelog-Eintrag

  63. 1.1.3 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed a bug

    Changelog-Eintrag

  64. 1.1.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added new feature "Spam Backlink Blocker"

    Changelog-Eintrag

  65. 1.1.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed a bug and improved code

    Changelog-Eintrag

  66. 1.1.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    added some major improvements

    Changelog-Eintrag

  67. 1.0.2 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed some minor issues with styling

    Changelog-Eintrag

  68. 1.0.1 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    fixed plugin directory url issue

    Changelog-Eintrag

  69. 1.0.0 Noch nicht verfügbar Veröffentlichungsdatum nicht angegeben

    Initial release.

    Changelog-Eintrag

Readme

Lizenz

Better Robots.txt - AI-Ready Crawl Control & Bot Governance (Premium)

Replace the default WordPress robots.txt workflow with a smarter, structured version you can preview before publishing, with Free, Pro, and Premium editions.

Better Robots.txt replaces the default WordPress robots.txt workflow with a smarter, structured version you can configure and preview before publishing.

Instead of a blank textarea, you get a guided wizard with presets, plain-language explanations, and a final Review & Save step so you can inspect the generated robots.txt before it goes live.

Built for beginners and advanced users alike, Better Robots.txt helps you control how search engines, AI crawlers, SEO tools, archive bots, bad bots, social preview bots, and other automated agents interact with your site.

Trusted by thousands of WordPress sites, Better Robots.txt is designed for the AI era without resorting to hype, vague promises, or hidden rules.

Better Robots.txt is available in Free, Pro, and Premium editions. The free plugin covers the guided workflow and essential crawl control features, while Pro and Premium unlock additional governance, protection, and AI-ready modules. Some screenshots on the plugin page show features from all three editions.

Was es mitbringt

  • Integration mit WooCommerce

Installation

  1. Upload the plugin files to the /wp-content/plugins/better-robots-txt/ directory, or install Better Robots.txt through the WordPress Plugins screen.
  2. Activate the plugin through the Plugins screen in WordPress.
  3. Open the Better Robots.txt settings page from your WordPress dashboard.
  4. Choose a preset or configure each module manually.
  5. Follow the wizard until the final Review & Save step.
  6. Review the generated robots.txt preview.
  7. Save your changes.

Faq

Does this plugin create or manage robots.txt?

Yes. Better Robots.txt generates and manages your WordPress robots.txt through a guided interface, with a preview before you apply changes.

Is this only for advanced users?

No. The plugin is designed for both beginners and advanced users. Presets make the first setup easy, while experts can fine-tune individual modules and directives.

Can I preview the result before saving?

Yes. The final Review & Save step shows you the generated robots.txt before you publish it.

Can I block AI crawlers?

You can configure how AI-related crawlers and tools are treated and publish AI usage preferences. Respect and enforcement still depend on each crawler's behavior, just like with robots.txt.

Does llms.txt guarantee that AI systems will follow my rules?

No. llms.txt and similar policy signals help you express intent more clearly, but they are not a hard technical barrier.

Can I keep search engines allowed while restricting other bots?

Yes. Better Robots.txt helps you differentiate between crawler categories instead of using a simple all-or-nothing approach.

Can I change preset decisions later?

Yes. Presets are a starting point. You can revisit the settings page, adjust modules, and regenerate your robots.txt at any time.

Are all screenshots from the free version?

No. The screenshots reflect the current product family and may include Free, Pro, and Premium features. Features marked Pro or Premium in the interface require a paid edition.

Is the free version still useful on its own?

Yes. The free edition includes the guided workflow, essential crawl control, and the final preview step. Pro and Premium are for sites that need broader governance and stricter protection.

Does this plugin help WooCommerce sites?

Yes. Better Robots.txt includes WooCommerce-related cleanup options to reduce unnecessary crawling of dynamic, low-value, or duplicate URLs.

Who develops Better Robots.txt?

Better Robots.txt is developed by Pagup, a digital readability firm based in Quebec, Canada. Pagup specializes in helping organizations become correctly readable by search engines, AI systems, and autonomous agents.

Why does robots.txt matter for AI readability?

Your robots.txt is the first file that AI crawlers read when they visit your site. It determines what content they can access and what governance signals they discover. In 2026, AI systems such as ChatGPT, Perplexity, Gemini, and autonomous agents rely on robots.txt to understand how to interact with your site. A robots.txt that references your llms.txt, ai-manifest.json, and governance policies helps these systems interpret your organization more accurately.

Learn more about AI governance and machine readability and why digital readability goes beyond traditional SEO.

What is digital readability?

Digital readability is the capacity of a website to be correctly understood by all four reading layers: humans, search engines, generative AI systems, and autonomous agents. Traditional SEO addresses only the search engine layer. Digital readability covers all four. Learn more at pagup.com.

Screenshots

  1. Step 0 - Preset selection with product introduction and setup guidance.
  2. Step 1 - Search engine visibility controls.
  3. Step 2 - AI and LLM governance settings.
  4. Step 4 - Bad bot protection options.
  5. Step 8 - WooCommerce cleanup settings.
  6. Step 10 - Social media crawler controls.
  7. Step 13 - Advanced settings and output options.
  8. Step 14 - Review & Save preview screen.

Installieren

composer require meteorgpl-plugin/better-robots-txt-premium

Die Lizenzprüfungen des Anbieters sind unverändert: Aktivieren Sie das Plugin in WordPress mit einem beim Anbieter gekauften Lizenzschlüssel.

Lizenz

Das Plugin deklariert keine Lizenz. Der Code wird unter der Lizenz weiterverbreitet, die der Anbieter in den eigenen Headern des Plugins deklariert hat.

Grafiken, Schriften, Medien und Dokumente, die möglicherweise separat lizenziert sind, werden nicht weiterverbreitet; die Lizenzseite erklärt, was ersetzt oder entfernt wird, und der Sicherheits-Tab listet es pro Version auf. Der Anspruch auf Support und Updates ergibt sich aus der Lizenz, die Sie beim Anbieter kaufen.

Feedback senden

Was funktioniert, was nicht, was fehlt: Ein paar Worte helfen.

Nur wenn Sie eine Antwort möchten.

Wird in Ihrem Browser aufgenommen, ohne dieses Fenster. Passwörter, Ihre Eingaben in Formularen, Schlüssel und Tokens werden als graue Blöcke ausgelassen; vor dem Senden können Sie weitere Bereiche verbergen. Screenshots bewahren wir 90 Tage auf.

Wir speichern es mit der Seitenadresse, Ihrer Sprache, der Fenstergröße, dem Browser und der IP-Adresse, und Ihrer E-Mail-Adresse, wenn Sie eine angeben. IP-Adresse und Browser werden nach 90 Tagen gelöscht. Datenschutzerklärung.

Alle Sprachen