search-engine-bots

0열

3답변

GoogleBot 및 기타 검색 엔진 크롤러가 크롤링하지 않아야하는 색인 생성 된 페이지를 수정하는 방법은 무엇입니까?

기존 .Net MVC3 사이트에서 URL이 www.mysite.com/someterm/anotherterm/_p/89/10 인 페이지를 구현했습니다. 여기서 89는 페이지 번호이고 10은 페이지 당 결과 수입니다. 불행히도 rel="nofollow"은 3보다 큰 페이지 번호 링크에서 누락되었으며 해당 페이지에도 <meta name="robots" conte

1열

1답변

인간과 유사한 검색 엔진 쿼리를 작성하는 방법은 무엇입니까?

나는 프로그래밍 방식으로 검색 엔진과 상호 작용하고 있으며, 나는 로봇과는 달리 인간이 만드는 쿼리라고 생각하도록 속일 필요가있다. 이것은 "ncaa football schedule"또는 "달 착륙시기"와 같이 일반 사용자가 검색 할 가능성이있는 검색어를 생성하는 것입니다. 나는 매일 1000 가지 이상의 질의를 작성하고 사전에서 임의의 단어를 검색하는 것

0열

1답변

성가신 봇을 위험에 빠뜨리지 않고 재 방문자를위한 콘텐츠를 제한하는 방법은 무엇입니까?

저는 website.com의 일부 페이지에서 새로운 방문자에게 몇 가지 내용 (소개)을 표시하려고합니다. 이미 본 적이 있다면 다시 사용자에게 "신경 쓰지"않을 것입니다. 사용자가 website.com/cool-article에 들어 왔다고 가정 해 봅시다. 사용자에게 상단에 소개를 표시하고 사용자가 website.com/useful-article-43을 클

0열

1답변

Google 검색에서 로그인 입력란을 숨기기

배경 : 내 웹 사이트를 사용하면 등록 된 사용자가 동영상을 업로드하고 공유 할 수 있습니다. 등록 된 사용자가 원하는 경우 로그인 할 수 있도록 기본 페이지에 "사용자 이름"및 "암호"필드가 있습니다. 또한 각 비디오 페이지에는 비트 전송률과 플래시 플레이어를 선택할 수있는 텍스트 링크가 있습니다. 을 (. 모두의 예 http://videoflier.co

1열

1답변

Baidu 검색 스파이더가 Javascript를 인식합니까?

보다 구체적으로는,/얼마나 잘 바이두 검색 크롤러 인덱스 않을 경우 - 콘텐츠 AJAX를 통해 제공 역사의 API (pushState()) 내가 그들의 문서를 통해 검토 한 결과 및 webmaster tools 사이트가 색인 생성 된 방법에 대한 미리보기를 보여주는 'Baidu bot으로보기'도구 (예 : Google & Bing 있음)를 찾을 수 없습니까

1열

2답변

검색 엔진 결과에서 Robots.txt를 숨기는 방법?

나는 검색 결과 목록에 Robots.txt을보고 싶지 않습니다. 나는 asp.net 프로젝트에서 일하고있다. 헤더에 "X-로봇 - 태그"를 사용 : 은 좀 실패 솔루션, 다음과 같은 중 하나를 발견했다. 하지만 "헤더"부분이 없도록 txt 파일을 숨기고 싶습니다. 도움 주셔서 감사합니다.

3열

2답변

모든 검색 엔진을 멈추는 방법, 봇이 일부 URL을 크롤링하는 방법

광고를 집계하려면 위젯을 클릭하고 싶습니다. 내가있는 robot.txt 파일을 사용했습니다 : User-agent: * Allow:/ Disallow: */ads_count/* 나는 또한 그 위젯의 모든 링크에 대한 nofollow을 추가했습니다. 하지만 많은 봇은 여전히 해당 위젯에서 url을 추적합니다. URL을 계산할 클라이언트 IP를 얻었고

0열

1답변

웹 마스터 도구가 내 페이지 설정 패턴을 좋아하지 않습니다.

웹 마스터 도구에서 강조 표시 기능을 사용하려고합니다. 내 페이지에 대해 작성을 마쳤지만 페이지 세트를 만들려고 할 때 패턴과 일치하는 파일을 찾지 못합니다. 구글이 선택한 기본 패턴은 다음과 같습니다이 내 사이트에있는 모든이기 때문에 충분히 좋지 않다 http://www.example.com/*/*/*/* . http://www.example.com/

1열

1답변

Robots.txt 파일의 Disallow 문의 * 문자

robots.txt 파일의 disallow 문에서 여러 검색 로봇이 * 문자를 어떻게 해석합니까? 그들 모두가 그것을 "아무도 아닌, 하나 이상의 캐릭터"로 취급합니까? 는 이제 다음 예를 보자 : User-agent: * Disallow: /back-end*/* 위의 코드는 무엇을 의미합니까? "백엔드"라는 단어 뒤에 어떤 문자 집합이 있더라도

-2열

1답변

"웹 디자인 [도시 이름]"및 "웹 사이트 디자인 [도시 이름]"모두에 대한 페이지가 필요합니까? 아니면 "웹 사이트 디자인 [도시 이름]"을 사용하여 둘 다 순위를 매길 수 있습니까?

Google의 키워드 플래너가 "웹 디자인 [도시 이름]"이라는 키워드가 ~ 880 개의 검색어를 표시하고 "웹 사이트 디자인 [도시 이름]"이 620 번 검색되는 경우 두 키워드에 대해 " 웹 사이트 디자인 [city-name] "? 아니면 "웹 디자인 [도시 이름]"및 "웹 사이트 디자인 [도시 이름]"에 대한 페이지가 필요합니까?