웹 페이지에 특정 텍스트가 포함 된 경우 URL 목록 만들기

하프 바이트 코드

웹 페이지에 "XYZ"라는 텍스트가 포함되어 있는지 여부에 따라 웹 페이지의 URL 목록을 만들려고합니다.

URL은 다음과 같은 형식입니다.

https : //www.website.tld/page.php? var1 = ??? & var2 = static

??? 1로 시작하는 숫자이며 오류 페이지가 나타날 때까지 매번 1 씩 증가합니다 (예 : "ERROR"텍스트가 포함 된 페이지).

긍정적 인 일치의 URL을 출력 파일에 덤프하고 싶습니다. curl은 이러한 URL을 순차적으로 스캔 할 수 있으며 출력은 grep에 전달할 수 있습니다. 그러나 grep 출력 후 URL을 검색하고 저장할 수있는 방법을 잘 모르겠습니다.

하프 바이트 코드

작업 스크립트를 만들었습니다. 누군가가 도움이 될 경우 공유하십시오. @nohillside의 답변이 도움이되었습니다.

#!/bin/bash

count=1

while true
do
    url="https://www.website.tld/page.php?var1=${count}&var2=static"

    text=`curl -s "$url"`

    if echo "$text" | grep -q "ERROR"
    then
        break
    elif echo "$text" | grep -q "XYZ"
    then
        echo "$url" >> matches.txt
    fi

    ((count++))

done

이 기사는 인터넷에서 수집됩니다. 재 인쇄 할 때 출처를 알려주십시오.

침해가 발생한 경우 연락 주시기 바랍니다[email protected] 삭제

에서 수정
0

몇 마디 만하겠습니다

0리뷰
로그인참여 후 검토

관련 기사

분류에서Dev

Google 스프레드 시트 + Apps Script : 열에 특정 단어가 포함 된 경우에만 데이터 목록 만들기

분류에서Dev

목록에 특정 텍스트가 포함 된 경우 목록에서 요소 제거

분류에서Dev

D 열에 특정 텍스트가 포함 된 경우 마스터 목록에서 행 복사

분류에서Dev

URL에 특정 텍스트 섹션이 포함 된 경우 div 표시 또는 숨기기

분류에서Dev

텍스트 상자에 특정 텍스트가 포함 된 항목 만 추가

분류에서Dev

특정 텍스트가 포함 된 경우 DIV 숨기기

분류에서Dev

페이지에 특정 클래스가 포함 된 경우에만 자바 스크립트 작업 수행

분류에서Dev

URL에 특정 텍스트가 포함 된 경우 자바 스크립트 기능을 비활성화하는 방법은 무엇입니까?

분류에서Dev

열에 특정 텍스트 / 문자열이 포함 된 경우 행 숨기기

분류에서Dev

수식에 특정 텍스트 / 기호 / 기능이 포함 된 경우

분류에서Dev

다음 셀에 특정 텍스트가 포함 된 경우 정수만 허용하도록 데이터 유효성 검사를 만드는 방법

분류에서Dev

특정 텍스트가 포함 된 LibreOffice 워크 시트에서 셀의 배경 채우기 변경

분류에서Dev

URL에 특정 단어가 포함 된 웹 페이지의 URL을 인쇄하는 정규식

분류에서Dev

경로가 포함 된 문자열 목록에서 트리 만들기

분류에서Dev

여러 열에 특정 텍스트가 포함 된 경우에만 열의 양수 값 합계

분류에서Dev

R : 이름에 특정 텍스트가 포함 된 경우 그룹화

분류에서Dev

스팬 ID에 특정 텍스트가 포함 된 PHP 데이터가 포함 된 경우

분류에서Dev

DataFrame에 특정 문자열이 포함 된 경우 새 열 만들기

분류에서Dev

R : 변수의 셀에 특정 텍스트가 포함 된 경우

분류에서Dev

Nokogiri를 사용하여 ID에 특수 문자가 포함 된 경우 URL / 텍스트 스크래핑 방법

분류에서Dev

Google 시트 : 셀에 특정 텍스트가 포함 된 경우 이미지 또는 그림 추가

분류에서Dev

그것은 특정 문자가 포함 된 경우 목록 또는 세트에서 요소를 제거

분류에서Dev

두 개의 특정 요소가 포함 된 목록에서 목록 찾기

분류에서Dev

Bash : 이름에 문자열 목록 중 하나가 포함 된 경우 파일을 특정 폴더로 이동

분류에서Dev

CSOM을 사용한 초기 배포 후 특정 페이지에 SharePoint 목록 웹 파트 추가

분류에서Dev

두 태그 사이에 텍스트 블록을 잡고 블록에 특정 태그가 포함 된 경우 다음 줄을 추가합니다.

분류에서Dev

특정 값이 포함 된 경우에만 행 유지

분류에서Dev

특정 셀에 특정 텍스트가 포함 된 경우 여러 셀을 다시 복사하는 VBA 코드

분류에서Dev

정규식을 사용하여 특정 텍스트가 포함 된 목록 가져 오기

Related 관련 기사

  1. 1

    Google 스프레드 시트 + Apps Script : 열에 특정 단어가 포함 된 경우에만 데이터 목록 만들기

  2. 2

    목록에 특정 텍스트가 포함 된 경우 목록에서 요소 제거

  3. 3

    D 열에 특정 텍스트가 포함 된 경우 마스터 목록에서 행 복사

  4. 4

    URL에 특정 텍스트 섹션이 포함 된 경우 div 표시 또는 숨기기

  5. 5

    텍스트 상자에 특정 텍스트가 포함 된 항목 만 추가

  6. 6

    특정 텍스트가 포함 된 경우 DIV 숨기기

  7. 7

    페이지에 특정 클래스가 포함 된 경우에만 자바 스크립트 작업 수행

  8. 8

    URL에 특정 텍스트가 포함 된 경우 자바 스크립트 기능을 비활성화하는 방법은 무엇입니까?

  9. 9

    열에 특정 텍스트 / 문자열이 포함 된 경우 행 숨기기

  10. 10

    수식에 특정 텍스트 / 기호 / 기능이 포함 된 경우

  11. 11

    다음 셀에 특정 텍스트가 포함 된 경우 정수만 허용하도록 데이터 유효성 검사를 만드는 방법

  12. 12

    특정 텍스트가 포함 된 LibreOffice 워크 시트에서 셀의 배경 채우기 변경

  13. 13

    URL에 특정 단어가 포함 된 웹 페이지의 URL을 인쇄하는 정규식

  14. 14

    경로가 포함 된 문자열 목록에서 트리 만들기

  15. 15

    여러 열에 특정 텍스트가 포함 된 경우에만 열의 양수 값 합계

  16. 16

    R : 이름에 특정 텍스트가 포함 된 경우 그룹화

  17. 17

    스팬 ID에 특정 텍스트가 포함 된 PHP 데이터가 포함 된 경우

  18. 18

    DataFrame에 특정 문자열이 포함 된 경우 새 열 만들기

  19. 19

    R : 변수의 셀에 특정 텍스트가 포함 된 경우

  20. 20

    Nokogiri를 사용하여 ID에 특수 문자가 포함 된 경우 URL / 텍스트 스크래핑 방법

  21. 21

    Google 시트 : 셀에 특정 텍스트가 포함 된 경우 이미지 또는 그림 추가

  22. 22

    그것은 특정 문자가 포함 된 경우 목록 또는 세트에서 요소를 제거

  23. 23

    두 개의 특정 요소가 포함 된 목록에서 목록 찾기

  24. 24

    Bash : 이름에 문자열 목록 중 하나가 포함 된 경우 파일을 특정 폴더로 이동

  25. 25

    CSOM을 사용한 초기 배포 후 특정 페이지에 SharePoint 목록 웹 파트 추가

  26. 26

    두 태그 사이에 텍스트 블록을 잡고 블록에 특정 태그가 포함 된 경우 다음 줄을 추가합니다.

  27. 27

    특정 값이 포함 된 경우에만 행 유지

  28. 28

    특정 셀에 특정 텍스트가 포함 된 경우 여러 셀을 다시 복사하는 VBA 코드

  29. 29

    정규식을 사용하여 특정 텍스트가 포함 된 목록 가져 오기

뜨겁다태그

보관