Plataforma de dados abertos da Universidade de São Paulo
USP Aberta — página inicial
Transparência

Nossos robôs

A USP Aberta usa robôs para ler fontes públicas. Esta página mostra, ao vivo, quais são, o que pedem e com que intensidade.

  • Identificação: cada pedido diz quem somos (nome e versão do robô, endereço desta página e e-mail de contato) no User-Agent e no cabeçalho From.
  • robots.txt: lemos as regras de cada site antes de coletar e não acessamos o que elas proíbem (RFC 9309).
  • Ritmo: um pedido por vez a cada site, com intervalo mínimo e variação aleatória; nos sites da USP, nunca menos de 3 segundos entre pedidos.
  • Recuo: se um site pede para esperar (Retry-After), demora a responder ou erra, esperamos mais; se ele recusa (403/429), paramos e só voltamos depois de um resfriamento.
  • Discrição: as coletas pesadas só rodam de madrugada ou no fim de semana, pedidos repetidos usam cache e respostas compactadas.

Robôs de coleta

Cada robô abaixo é descrito pelo próprio código que o executa e pelo agendador; os volumes são os pedidos realmente enviados a cada site.

hub_usp

Copia o catálogo público do Hub USP Inovação (iniciativas, centros de P&D&I, competências, disciplinas, empresas e patentes) e confere cada disciplina no JupiterWeb ou no Janus.

Ativo
Agenda
At 04:40 (America/Sao_Paulo)
Execuções
Última: 10/10/2026, 04:40 · Próxima: 11/10/2026, 04:40
Identificação (User-Agent)
Mnemosine/1.1.0 (+https://uspaberta.ime.usp.br/sobre-os-dados/robos; mailto:uspaberta@usp.br)

Só fora do horário de pico (00:00-07:00 nos dias úteis, o dia todo nos fins de semana): conferência de até 250 disciplinas no JupiterWeb/Janus.

SiteIntervalo mínimo24 h7 diasrobots.txt
hubusp.inovacao.usp.br
≥ 3 s77ausente
uspdigital.usp.br
≥ 3 s00—

inpi_rpi

Ativo
Agenda
At 06:00, only on Wednesday
Execuções
Última: 08/10/2026, 22:55 · Próxima: 14/10/2026, 06:00

jornal_usp

Arquiva as notícias e podcasts do Jornal da USP: confere o feed RSS a cada hora e, nas madrugadas e fins de semana, percorre devagar o acervo histórico pela API pública do WordPress.

Ativo
Agenda
At 17 minutes past the hour (America/Sao_Paulo)
Execuções
Última: 10/10/2026, 08:17 · Próxima: 10/10/2026, 09:17
Identificação (User-Agent)
Mnemosine/1.1.0 (+https://uspaberta.ime.usp.br/sobre-os-dados/robos; mailto:uspaberta@usp.br)

Só fora do horário de pico (00:00-07:00 nos dias úteis, o dia todo nos fins de semana): acervo histórico (até 8 páginas de 100 itens por execução); varredura diária de edições; conciliação semanal pelos sitemaps (domingo).

SiteIntervalo mínimo24 h7 diasrobots.txt
jornal.usp.br
≥ 3 s269269lido

pdi_oficial

Ativo
Agenda
At 05:10, only on Monday
Execuções
Última: 08/10/2026, 22:55 · Próxima: 12/10/2026, 05:10

agora_ingest

Lê uma vez por dia a planilha pública de eventos enviada pelas unidades e alimenta a agenda Ágora.

Ativo
Agenda
At 00:00
Execuções
Última: 10/10/2026, 00:00 · Próxima: 11/10/2026, 00:00

Consultas sob demanda (Ágora)

Ao enriquecer um evento da agenda, a Ágora consulta APIs públicas, uma de cada vez por fonte e com cache, identificando-se como Agora/1.1 (+https://uspaberta.ime.usp.br/sobre-os-dados/robos; mailto:uspaberta@usp.br).

FonteSiteIntervalo mínimoCacheSituação
uspabertabackend:80000,1 s24 hativa
orcidpub.orcid.org0,1 s168 hativa
openalexapi.openalex.org0,1 s168 hativa
crossrefapi.crossref.org0,2 s168 hativa
dataciteapi.datacite.org0,2 s168 hativa
rorapi.ror.org0,2 s168 hativa
unpaywallapi.unpaywall.org0,1 s168 hativa
opencitationsapi.opencitations.net0,2 s168 hativa
semanticscholarapi.semanticscholar.org1 s168 hativa
musicbrainzmusicbrainz.org1 s168 hativa
openlibraryopenlibrary.org, covers.openlibrary.org1 s168 hativa
dblpsparql.dblp.org1 s168 hativa
zbmathapi.zbmath.org0,5 s168 hativa
inspireinspirehep.net0,4 s168 hativa
pubmedeutils.ncbi.nlm.nih.gov0,4 s168 hativa
europepmcwww.ebi.ac.uk0,2 s168 hativa
arxivexport.arxiv.org3 s168 hativa
adsapi.adsabs.harvard.edu0,5 s168 hdesligada
zenodozenodo.org2 s168 hativa
doajdoaj.org0,5 s168 hativa
coreapi.core.ac.uk1 s168 hdesligada
openaireapi.openaire.eu0,5 s168 hativa
wikidataquery.wikidata.org, www.wikidata.org0,5 s168 hativa
wikipediawww.wikidata.org0,2 s168 hativa
commonswww.wikidata.org, commons.wikimedia.org0,2 s168 hativa
listenbrainzapi.listenbrainz.org0,5 s168 hativa
rismrism.online0,5 s168 hativa
imslpimslp.org1 s168 hativa
discogsapi.discogs.com2,5 s168 hativa
gettyvocab.getty.edu0,5 s168 hativa
isniisni.oclc.org1 s168 hativa
hathitrustcatalog.hathitrust.org0,5 s168 hativa
internetarchivearchive.org1 s168 hativa
scieloarticlemeta.scielo.org0,5 s168 hativa
bdtdbdtd.ibict.br1 s168 hativa
jornaluspjornal.usp.br3 s168 hativa
mapasculturaismapa.cultura.gov.br1 s168 hativa
nihreporterapi.reporter.nih.gov1 s168 hativa
patentsviewsearch.patentsview.org1,5 s168 hdesligada
gdeltapi.gdeltproject.org6 s168 hativa
europeanaapi.europeana.eu0,2 s168 hdesligada

Contato

Se algum robô estiver incomodando o seu site, escreva para nós e reduzimos ou interrompemos a coleta. Também respeitamos automaticamente qualquer regra de bloqueio no robots.txt do seu site.

Gerado em 10/10/2026, 05:27.