기타 분류

[파워쉘] 다수의 웹사이트에 저장된 txt 파일 내컴퓨터에 저장

작성자 정보

  • ADKye 작성
  • 작성일

컨텐츠 정보

본문

최종수정 : 2023 / 10 / 22
대상 : 데이타저장


다수의 웹 웹사이트에 데이타를 저장하고 수집하는 과정에 너무 시간이 걸리는거 같아 관련 기술을 찾아보니.

파워셀을 통해 가능하다.


아래코드는 파워쉘 명령어로 도메인주소가 포함된 파일 전체 주소를 입력하면

파워쉘을 실행한 위치에 해당 데이타가 저장된다.



Invoke-WebRequest -Uri "https://도메인주소/data20231022.txt" -OutFile "myFile01.txt"
Invoke-WebRequest -Uri "https://도메인주소/data20231022.txt" -OutFile "myFile02.txt"
Invoke-WebRequest -Uri "https://도메인주소/data20231022.txt" -OutFile "myFile03.txt"
 

주소 / 저장할이름

관련자료

댓글 0
등록된 댓글이 없습니다.
전체 47 / 1 페이지
RSS
  • 치환 정규식 - </div>(?!.*</div>)[^\n]* 마지막 줄 치환
    등록자 ADKye
    등록일 01.25 포인트 무료 조회 826

    기타 최종수정 : 2024 / 01 / 25 대상 : 마지막</div> 찾아서 그 뒤의 모든 단어</div> 로 바꾸기정규식 </div>(?!.*</div>)[^\n]*</div>

  • PowerShell - 다수 url 텍스트 파일 하나에 저장
    등록자 ADKye
    등록일 11.30 포인트 무료 조회 8492

    공지 최종수정 : 2023 / 11 / 30 대상 :PowerShell php파일안에http://......./rss.phphttp://......./rss.phphttp://......./rss.php와 같이 url나열후 파워쉘로 해당 내용 txt 하나에 자동저장 명령어폴더안의 전체 php…

  • DNS 라운드 로빈 (DNS Round Robin)
    등록자 ADKye
    등록일 11.02 포인트 무료 조회 8468

    기타 최종수정 : 2023 / 11 / 02 대상 : 도메인설정특정 도메인에 트래픽이 몰리면서 속도저하등이 발생할때여유있는 서버에 해당 도메인의 동일한 파일 업로드로 접속자마다 랜덤하게 해당 서버파일을 읽어 올 수 있게 하여트래픽을 분산시킨다.설정은 단순하다.도메인등록업체의 설정으로 이동후 …

  • 특정 테이블 NULL 값이 아닌 행 삭제 명령어
    등록자 ADKye
    등록일 10.30 포인트 무료 조회 8370

    SQL 최종수정 : 2023 / 10 / 30 대상 : sql특정 테이블 NULL 값이 아닌 행 삭제 명령어use 디비명;DELETE FROM wp_glbotcp_keywords WHERE posted_at IS NOT NULL;등록된 키워드만 삭제

  • 그누보드 h2,h3 기준 - 상단 자동목차생성코드
    등록자 ADKye
    등록일 10.23 포인트 1,000 조회 8193

    그누보드 최종수정 : 2023 / 10 / 대상 : 그누보드 본문에 삽입된 h2, h3 를 기준으로 본문 상단에 자동으로 목차를 생성해준다.목차 클릭 시 해당 영역으로 바로가기도 가능.부트스트랩 코드로 디자인을 적용했지만.부트스크랩을 사용안할시 스타일 태그를 수정하여 사용이 가능할거 같습니다.&…

  • meta og:url / $pset['href'] 변형 문제
    등록자 ADKye
    등록일 10.23 포인트 무료 조회 8080

    그누보드 최종수정 : 2023 / 10 / 23 대상 : 그누보드 그누엔진 하나에 여러 도메인등 연결 사용하거나,board.php 를 board001.php, board002.php .. 와 같이 추가 하여 사용할 경우모든 페이지 메타 부분에<meta property="og:url" con…

  • [파워쉘] 다수의 웹사이트에 저장된 txt 파일 내컴퓨터에 저장
    등록자 ADKye
    등록일 10.22 포인트 무료 조회 8233

    기타 최종수정 : 2023 / 10 / 22 대상 : 데이타저장 다수의 웹 웹사이트에 데이타를 저장하고 수집하는 과정에 너무 시간이 걸리는거 같아 관련 기술을 찾아보니.파워셀을 통해 가능하다.아래코드는 파워쉘 명령어로 도메인주소가 포함된 파일 전체 주소를 입력하면파워쉘을 실행한 위치에 해당 …

  • [편집중] 네이버 서치어드바이저 최종 - 결과등 정리 2023/10/19
    등록자 ADKye
    등록일 10.19 포인트 1,000,000,000 조회 1039

    편집중 최종수정 : 2023 / 10 / 19 대상 : 네이버서치어드바이저 약 두달간의 네이버서치어드바이저에 대한 다양한접근과 그에 따른 네이버검색결과에서의 문서색인, 유입트래픽등을 분석한 최종결과입니다.[편집중]

  • 백업받은 모든 sql 파일에서 특정 단어가 포함된 줄만 따로 저장하기
    등록자 ADKye
    등록일 10.15 포인트 무료 조회 8306

    SQL 최종수정 : 2023 / 10 / 15 대상 : SQL 디비작업백업받은 전체 sql파일에서 특정 url 이나 단어가 포함된 열 찾아서 따로 저장한글은 못찾는거 같은데.. 필요할때 다시 검색1.sql ->1_추출.txt 저장파워쉘로 실행--------------$sqlFolder =…

  • 워드프레스 자동업데이트등 외부통신 모두 차단
    등록자 ADKye
    등록일 10.12 포인트 무료 조회 8472

    워드프레스 최종수정 : 2023 / 10 / 12 대상 : 워드프레스 내가 생각하는 워드프레스의 단점중 하나는 워드프레스를 포함한 여러 플러그인의 업데이트 통신이다.불필요한 트래픽증가, 통신오류로 인한 에러로그, 업데이트중 중단에 따른 파일손상등등..아래 코드는 자동업데이트, 그외 업데이트 확인등…

  • 그누보드용 인덱스나우 플러그인
    등록자 ADKye
    등록일 10.12 포인트 무료 조회 923

    그누보드 최종수정 : 2023 / 10 /12 대상 : 그누보드그누보드용 인덱스나우 플러그인네이버만 적용되는 버전https://sir.kr/g5_plugin/11605

  • 백버튼, 포워딩등 매칭키워드 없을때 대응
    등록자 ADKye
    등록일 10.01 포인트 무료 조회 944

    기타 최종수정 : 2023 / 10 / 01 대상 : 그누보드 키워드와 제목 없을때 대응 (게시판 목록페이지등)----------------------if (empty($write['ca_name']) && empty($write['wr_subject'])) { $write['…

  • 방화벽 다수 아이피(대역) 차단 규칙 한번에 하기
    등록자 ADKye
    등록일 09.30 포인트 무료 조회 866

    기타 최종수정 : 2023 / 09 / 30 대상 : 윈도우방화벽명령프롬프트 관리자권한netsh advfirewall firewall add rule name="차단할아이피" dir=in action=block remoteip=5.182.22.0-5.182.23.255,8.12.16.0-8.…

  • [HTML] 화면크기에 따라 제목 길이 조절하기
    등록자 ADKye
    등록일 09.23 포인트 무료 조회 924

    그누보드 최종수정 : 2023 / 09 / 23 대상 : HTML포스팅의 제목은 중요한 요소이지만 대부분의 제목 위치는 본문상단에 위치해 있다.제목이 길어질 경우 두줄, 세줄로 표기되는 경우가 있는데 광고쟁이 입장에서는 제목이 차지하는 상단 위치가 상당히 아쉽니다.그렇다고 제목을 뺄 수 도 없고…

  • 네이버 서치어드바이저3 - 네이버 색인은 목요일? / 검색상위노출을 위한 준비
    등록자 ADKye
    등록일 09.21 포인트 1,000 조회 913

    검색엔진 최종수정 : 2023 / 09 / 21 대상 : 네이버다수의 사이트와 사이트간 서브백링크 작업을 통해 이젠 전체사이트에서의 봇 활동이 활발하게 진행중입니다.새로 추가하는 신규 사이트 역시 기존사이트들의 백링크 영역을 통해 거의 즉각적으로 봇 활동이 이뤄지고 있습니다.대략 6개월가량 관리…