봇이 GCloud에서 호스팅되는 웹 사이트에 액세스하지 못하도록하십시오.

Question

모든 검색 엔진 봇이 내 웹 사이트에 액세스하지 못하게하려고합니다.

이러한 권한을 robots.txt 파일에 지정할 수 있지만 Google 클라우드에서이 파일을 편집하려면이 파일에 액세스 할 수 있는지 잘 모르겠습니다.

Gcloud와 함께 Python을 사용하여 웹 서버를 개발했습니다.

다음 주제를 읽었습니다. http://stocksonfire.in/seo/edit-robots-txt-google-cloud-solved/ 그러나 리소스에서 VM 인스턴스를 찾지 못했습니다. 먼저 생성해야합니까?

편집 :이 @Dac 손더스 제안을

runtime: python 
env: flex 
entrypoint: gunicorn -b :$PORT main:app 

runtime_config: 
    python_version: 3 

handlers: 
- url: /robots\.txt 
    static_files: robots.txt 
    upload: robots\.txt 

Answer 1

을 appling 후 내 애플리케이션 제목을 파일로 내 robots.txt (파이썬에서 appengine가와)과 같습니다.

User-agent: * 
Disallow: /q? 

Sitemap: /sitemap.xml.gz 

<MYAPP>/static/robots.txt에 넣었습니다. 그럼 이런 app.yaml에 매핑 :

handlers: 
- url: /(robots\.txt|favicon\.ico) 
    static_files: static/\1 
    upload: static/.* 

내 robots.txt에 내 도메인의 루트에 접근하게이 방법.