접근하지 말아야할 URL 주소에 잘못된 주소로 접근을 할때 웹봇이 접근하지 않도록 하는 방법 > 리눅스서버
리눅스서버

접근하지 말아야할 URL 주소에 잘못된 주소로 접근을 할때 웹봇이 접근하지 않도록 하는 방법

조회 85회 댓글 0건

누군가 이 사이트에 불필요한 링크를 걸었습니다.

그런데 희안 한것은 작동도 안되는 것을 링크를 걸었다는 것입니다.

이 문제로 인해 불필요한 리소스가 들어가는것과 웹봇도 불필요한것을 수집하여 접근 하기 때문에 양쪽에 문제가 있는 것입니다.


검색을 통해 원인이 되는 웹사이트를 잡으려 생각 하고 있습니다.


접근하지 말아야할 URL 주소에 잘못된 주소로 접근을 할때 웹봇이 접근하지 않도록 하는 방법
 


형태는 아래와 같습니다. SQL 인젝션은 아닌데 다른 주소로 넘어가도록 우회 시키려 한것 같은데 이렇게 링크 걸 때 확인도 안하고 링크를 걸었을까?

no 파라미터는 프로그램을 보면 숫자가 아니면 작동하지 않도록 되어 있습니다.


34.64.82.75 - - [02/Oct/2024:16:35:34 +0900] "GET /content/bbs/link.php?bo_table=pds&wr_id=79&no=1xn--b1axgcsz.xn--p1ai/526azfe36j HTTP/1.1" 404 13 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/129.0.6668.70 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"


34.64.82.70 - - [02/Oct/2024:16:35:41 +0900] "GET /content/bbs/link.php?bo_table=pds&wr_id=79&no=1xn----etbgapnkmdebtz8p.xn--p1ai/651azfe36j HTTP/1.1" 404 13 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/129.0.6668.70 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"


34.64.82.67 - - [02/Oct/2024:16:37:50 +0900] "GET /content/bbs/link.php?bo_table=pds&wr_id=79&no=1xn---45-5cd3cgu2f.xn--p1ai/876azfe36j HTTP/1.1" 404 13 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/129.0.6668.70 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"


34.64.82.71 - - [02/Oct/2024:16:37:53 +0900] "GET /content/bbs/link.php?bo_table=pds&wr_id=79&no=1xn--80abfuckjwik9b4i.xn--p1ai/473azfe36j HTTP/1.1" 404 13 "-" "Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/129.0.6668.70 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"


robots.txt 파일에 아래와 같은 방법으로 처리 했습니다.
User-agent: Googlebot
Disallow: /content/bbs/link.php
Disallow: /content/bbs/

  • 페이스북으로 공유
  • 트위터로 공유
  • 구글플러스로 공유
전체 171건 1 페이지
  • [MySQL] 계산결과를 자동처리 해주는 VIRTUAL와 STORED의 차이점
    profile_image VIRTUAL 키 사용 안되는줄 알았는데 테스트 해보니 키저장이 됩니다. 단 값은 저장이 안되네요그리고 자동으로 계산된 결과를 사용하기 때문에 지정된 값은 저장이 되질 않습니다.    CREATE TABLE 파뿌리.판매_기록 (        id INT AUTO_INCREMENT,        상품코드 VARCHAR(7) NOT NULL,        상품명 VARCHAR(32) NOT NULL,        가격 INT NOT NULL comment '할인 되면 할인가격',        수량 INT NOT NULL,        판매금액 INT AS (가격 * 수량) STORED,        비고 TEXT,     …
  • certbot 무료 인증서 갱신 아파치(Apache) 웹서버 갱신
    profile_image certbot 무료 인증서 갱신 했는데 웹사이트에 적용이 안되네요!!그동안 내가 웹서버 환경을 같이 수동으로 적용 해서 몰랐던것입니다.그래서 ssl 인증서 갱신 되면 자동으로 아파치 웹서버 적용하는 방법이 없을까 찾아 보았는데 있어서 정리한것입니다. certbot renew --no-self-upgrade 명령어로 SSL 인증서를 갱신한 후 인증서가 실제로 갱신된 경우에만 Apache (httpd)의 환경설정을 재적용하려면 Certbot의 renew hook 기능을 사용할 수 있습니다.1. Certbot 갱신 훅 사용Certbot은 인증서가 성공적으로 갱신되었을 때만 실행되는 명령어를 지정할 수 있는 --deploy-h…
  • [MySQL] 한글 테이블명 컬럼명 사용에 대한 고찰
    profile_image 결론부터 말하면 잘 되고 사용하기 편하면 그냥 쓰면 되는 것이다.다른것과 문제가 생길 수 있기 때문에 생기는지 정확히 알지도 못하면서 생길까봐 안쓰는것은 고지식한것 아닌가 생각해 볼 필요는 있다고 본다. 물론 문제가 생길 수 있는 문제는 아래 PHP 한글변수 사용시의 문제점에 대부분들어갈 것으로 보인다- 프로그램을 한글 변수,함수 사용하는것에 대한 고찰 > PHP 이런 문제가 아니라면 난 사용하는 것이 오히려 좋다라고 본다.mysql> select 종목코드,일자,현재가,수량_사모펀드 from 키움_10059 WHERE (일자 BETWEEN 20230523 AND 202305224) AND 수량_사모펀드>…
  • 서버 시스템 복구 동의서(승인서) 양식
    profile_image 고객의 서버 시스템을 복구해야 할 때 사용하는 동의서 입니다. 보안 뿐만이 아니라 급작스러운 일이 있을 수 있기 때문에 백업의 중요성과 예상하지 못한 문제로 인하여 고객에게 사전에 충분히 인지 할 수 있도록 하기 위한 동의서 양식 입니다. ● 시스템 복구 동의 사항   1. 작업비용 산출 및 청구복구 의뢰 접수 후 담당자는 시스템 상태를 파악하며, 예상 작업시간과 비용을 산출 하여 담당 고객에게 처리해야 할 부분을 확인 합니다.시스템 복구에 대한 비용은 작업 시작 전에 청구 됩니다.※ 주간 기본비용 : 0만원/시간, 야간 기본비용 : 0만원/시간   2. 작업의뢰 전에 시스템의 파일을 무조건 모두 백업 받아야 …
  • 아파치 웹서버 특정 디렉토리 접근시 404 처리 방법
    profile_image http 프로토콜은 사실상 사용하지 않기 때문에 들어오는 그대로 https로 301 처리 합니다.그런데!!하지 말아야할 디렉토리가 발견되어 ssl 이동한 다음 404처리를 하기 때문에 처음 부터 404 처리 하는것이 좋은 경우가 있습니다.   <VirtualHost *:80>    ServerName pabburi.co.kr    DocumentRoot "/www_html"    RewriteEngine on    # Return 404 for any requests to the /data/ directory    RewriteRule ^/data/.* - [R=404,L]    # https 301    R…
  • 리눅스 find 명령으로 2024-03-01 이후에 수정된 파일 찾는법
    profile_image 간혹 파일을 찾기는 해야 하는데 언제쯤 이후에 만든것은 확실한데 어디 있는지 모르는 경우가 있을 때 유용 합니다.아래는 php 확장자인 경우 예를 들었습니다.삼바 연결된 곳이라면 PC 문서를 찾는데 무척 좋습니다.find . -type f -name "*.php" -newermt 2024-03-01 ▷ 각 항목에 대한 설명find: 파일 검색 명령어..: 현재 디렉토리를 의미.-type f: 파일만 검색.-name "*.php": .php 확장자를 가진 파일만 검색.-newermt 2024-03-01: 2024년 3월 1일 이후에 수정된 파일 검색.▶ find 명령으로 파일에 특정 문자가 있는 경우만 출력   아래는 현…