# Generatore di robots.txt

> Crea regole semplici per i crawler del tuo sito web.

[Open tool](https://www.toolcabana.com/it/robots-generator) · [Generatori e marketing](https://www.toolcabana.com/it/category/generators-and-marketing)

Tool ID: robots-generator. Requested language: it. Description language: it. Complete guide translation: yes.

## Overview (en)

The robots.txt generator writes a crawler rules file for all user agents using one of three policies: allow all, disallow all, or disallow a custom list of paths entered one per line. You can add a Sitemap line with an absolute URL. Each custom path must start with a slash, and the result downloads as a plain text file.

## Supported tasks (it)

Crea regole semplici per i crawler del tuo sito web.

## Steps (it)

1. Incolla l'origine nell'editor di input, oppure carica l'esempio integrato.
2. Imposta l'URL della sitemap e i criteri di scansione.
3. Esegui il generatore di robots.txt, esamina il risultato, poi usa i controlli disponibili per copiare o scaricare.

## Settings

- URL della sitemap (it; key: sitemap; type: text)
- Criteri di scansione (it; key: policy; type: select): Consenti tutto [it], Blocca tutto [it], Percorsi di blocco personalizzati [it]

## Limitations (it)

Le operazioni di testo accettano in genere fino a 2.000.000 di caratteri. Parser, generatori e formule singoli applicano limiti aggiuntivi mostrati dai relativi controlli.

## Example input

```text
/private/
/search/
```

## Privacy and connections (it)

Questa operazione elabora i dati di origine nel tuo browser. Copia e download sono azioni esplicite; l'input di origine non viene salvato in un account né in una cronologia.

## Questions (it)

### How do I block a folder in robots.txt?

Choose Custom disallow paths and enter each folder on its own line starting with a slash, such as /private/. Each line becomes a Disallow rule under User-agent: *. Paths that do not begin with a slash are rejected.

### Does robots.txt keep pages private or remove them from Google?

No. robots.txt controls crawling, not confidentiality or guaranteed deindexing. Anyone can still open a disallowed URL, so protect private content with access controls such as passwords or authentication.

### Can I write rules for a specific crawler like Googlebot?

Not with this generator. It always writes a single User-agent: * group that applies to every crawler. To target a specific bot, edit the downloaded file and add a separate User-agent group for it.

### Dove viene elaborato il mio input?

Questa operazione elabora i dati di origine nel tuo browser. Copia e download sono azioni esplicite; l'input di origine non viene salvato in un account né in una cronologia.

### Quali sono i limiti di input?

Le operazioni di testo accettano in genere fino a 2.000.000 di caratteri. Parser, generatori e formule singoli applicano limiti aggiuntivi mostrati dai relativi controlli.

## Related tools

- [Sitemap generator](https://www.toolcabana.com/it/sitemap-generator)
- [Invoice generator](https://www.toolcabana.com/it/invoice-generator)
- [Email mailto generator](https://www.toolcabana.com/it/mailto-generator)
- [Password generator](https://www.toolcabana.com/it/password-generator)