macsplex.com 로그인

검색

nginx
2021.03.22 23:03

nginx semrush bot 차단

조회 수 526 추천 수 0 댓글 0
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 게시글 수정 내역 댓글로 가기 인쇄
?

단축키

Prev이전 문서

Next다음 문서

크게 작게 위로 아래로 게시글 수정 내역 댓글로 가기 인쇄
Extra Form

/etc/nginx/sites-available/도메인 파일의 Server 해당 라인을 추가


### UserAgent block
        if ($http_user_agent = "") {
        return 403;
        }
        if ($http_user_agent ~* (AhrefsBot|BLEXBot|DotBot|SemrushBot|Eyeotabot|PetalBot|MJ12bot|brands-bot|bbot|AhrefsBo|MegaIndex|UCBrowser|Mb2345Browser|MicroMessenger|LieBaoFast|Headless|netEstate|newspaper|Adsbot/3.1|WordPress/|ltx71) ) {
    return 403;
  }


nginx재시작해줍니다.

debian ex) # /etc/init.d/nginx restart


curl를 사용하여 해당봇의 응답을 확인하는 명령어

#  curl -l --User-Agent "Mozilla/5.0 (compatible; SemrushBot; +http://www.semrush.com/bot.html)" https://macsplex.com


<html>
<head><title>403 Forbidden</title></head>
<body bgcolor="white">
<center><h1>403 Forbidden</h1></center>
<hr><center>nginx/1.10.3</center>
</body>
</html>



403 Forbidden 나오면 차단된걸로 확인하면 됩니다.






--------------------------------------------------광고(Advertising)-------------------------------------------------------------------------------------


TAG •

리눅스 Tip

Linux Tip

  1. 우분투에서 유용한 시스템 모니터링 툴

  2. No Image in nginx

    nginx rewrite 예제

  3. No Image in nginx

    nginx semrush bot 차단

  4. No Image in Debian

    Ngnix 특정폴더 인증절차추가

  5. 웹로그분석툴 GoAccess

  6. No Image in Debian

    워드프레스 고유주소 nginx 설정

  7. No Image in Debian

    nginx "rewrite" directive is not allowed here in 에러발생시

  8. CentOS 8 웹콘솔(Cokpit) 설치하기

  9. 우분투 18.04 영문판에서 한글입력 추가

  10. No Image in Fedora

    yarn 설치방법

  11. No Image in Fedora

    sudo 유저추가

  12. No Image in Fedora

    VMware Remote-Console 설치 에러

  13. 리눅스 민트 19.1 테사(Tessa) 업그레이드 방법

  14. No Image in Arch

    Arch 저장소(repo)추가 방법

  15. Gzip 압축효율 확인사이트

  16. No Image in Debian

    Nginx 이미지링크 방지

  17. No Image in Debian

    Nginx사용시 업로드용량변경

  18. No Image in DB

    Mysql(MaridaDB)접속시 ERROR 2002 발생시

  19. No Image in Apache2

    apache2 ssl 모드 활성 및 비활성화 명령어

  20. No Image in Fedora

    페도라 방화벽포트열기

Board Pagination Prev 1 2 3 4 5 6 7 8 Next
/ 8