Access Denied, python scraping?

Fala galera!

Estou estudando web scraping com python e em alguns casos me deparo com situações como

Access Denied

ao acessar um determinado site como http://americanas.com.br.

Alguém sabe me falar por que isso acontece?
Por que eu não consigo recuperar o html de sites assim?

Grato.

Pessoal, boa tarde.

Eu encontrei a solução.

Geralmente quando se monta o web scrap ou crawler muitos sites bloqueia o agente responsável pela requisição http. Então deve-se mudar o agente para que não seja um estranho ao site que se deseja acessar via script.

Vlw aos que visualizaram.

1 curtida

Opa, tudo bem?

Estou tentando o mesmo acesso pelo Selenium. Como vc fez para arrumar?