| User agent |
|---|
| Arquivo-web-crawler (compatible; heritrix/3 |
| arquivo-web-crawler (compatible; heritrix/3.4.0-20200304 +http://arquivo.pt) |
| arquivo-web-crawler (compatible; heritrix/3.4.0-20190418 +http://arquivo.pt) |
| Arquivo-web-crawler (compatible; heritrix/3.4.0-20200304 +https://arquivo.pt/faq-crawling) |
| Arquivo-web-crawler (compatible; brozzler/1.5 +https://arquivo.pt/faq-crawling) |
| Arquivo-web-crawler (compatible; browsertrix/0.8 +https://arquivo.pt/faq-crawling) |