질문과 답변
소프트웨어 오토핫키를 이용한 웹 크롤링 문의드립니다.
2023.11.06 14:38
안녕하세요.
오랜만에 질문하나 드리겠습니다.
실력이 없다보니 웹을 보고 따라해봐도 도저희 해결되지 않네요
먼저 아래는 인터넷을 보고 정말 약간의 코드만 수정한 소스입니다.
test := ComObjCreate("WinHTTP.WinHTTPRequest.5.1")
test.Open("GET", "https://www.kead.or.kr/bbs/deptgongji/bbsPage.do?menuId=MENU0895")
test.Send()
MsgBox, % test.ResponseText()
위 코드 실행 후 메시지 박스의 내용을 보면 제가 원하는 테이블 정보가 나오지 않습니다.
페이지 내에 테이블은 하나인데 위 코드로는 나타나지 않네요.
그런데
https://apsalman.tistory.com/80
님께서 만들어 배포해주신 프로그램을 이용하면 원하는 정보까지 나오는걸 확인할 수 있었습니다.
매번 사이트 방문하여 공지사항의 정보를 확인하는게 복잡하여 몇가지 사이트를 위와같이 크롤링하여 화면에 띄우고 한번에 보고자 합니다.
질문 1
위 코드와 같이 웹 사이트의 정보를 가져올 때 무슨 문제로 모든 정보가 들어오지 않는지요
질문2
모든 정보를 가져왔을 때 공지사항의 테이블 정보만 가져오는건 어떻게 구현하는지 궁금합니다.
예를들어 블럭을 씌워 가져오는지 regexmatch나 regexreplace등으로 파싱하여 가져오는지등
모르는게 많다보니 질문도 많네요
고수님들 조언 기다리겠습니다.
감사합니다.
댓글 [2]
| 번호 | 제목 | 글쓴이 | 조회 | 등록일 |
|---|---|---|---|---|
| [공지] | 질문과 답변 게시판 이용간 유의사항 | gooddew | - | - |
| 98278 | 윈 도 우| 왜, 이런 현상이 나오는 알수가 없습니다. [3] | 기억의저편 | 1119 | 11-07 |
| 98277 | 윈 도 우| 코파일럿 아이콘이 사라졌습니다. [6] | Trigun | 555 | 11-07 |
| 98276 | 소프트웨어| 앳지 브라우저 다운로드시 인터넷창 닫힘 문의 [4] | lynae | 245 | 11-07 |
| 98275 | 소프트웨어| 크롬 다운로드 하단표시 --disable-features=DownloadBubble [4] | 건조한치는 | 388 | 11-07 |
| 98274 | 윈 도 우| 기존 윈도우10 정품인증된거 MS계정으로 만들어서 타계정에... [6] | 컴알못러 | 685 | 11-07 |
| 98273 | 윈 도 우| 수고 많이 하십니다 제가 Trojan:Win32/Floxif.E 이것에 ... [3] | 유성 | 563 | 11-07 |
| 98272 | 하드웨어| 인텔 Arc A380 [1] | 수도산 | 463 | 11-07 |
| 98271 | 기 타| win32/fixflo.gen 걸렸는데..어떻게 치료해야하나요? [7] | 진이짱짱 | 752 | 11-07 |
| 98270 | 윈 도 우| C 드라이브 사용자 폴더명 변경 어떡합니까? [3] | 땅땅이 | 657 | 11-07 |
| 98269 | 윈 도 우| 윈도우를 설치했는데.. [2] | 우와윈도 | 482 | 11-06 |
| 98268 | 소프트웨어| 한글 2024 버전 써보신 분 계실까요? [4] | kwoods | 1441 | 11-06 |
| 98267 | 소프트웨어| 메모리 관련 문의 [1] | 강남역5번 | 230 | 11-06 |
| 98266 | 윈 도 우| 윈도우10 최근 빌드 이후 BCD파일의 위치가 바꼈나요? [4] | stream9 | 280 | 11-06 |
| 98265 | 윈 도 우| 윈도우10 사진앱 설치 위치가 어떻게 되나요? [2] | dlawlsfhr | 292 | 11-06 |
| 98264 | 하드웨어| Legion 5i 15IH6H 노트북 쓰시는 분 계신가요? [3] | 오두막과시 | 163 | 11-06 |
| » | 소프트웨어| 오토핫키를 이용한 웹 크롤링 문의드립니다. [2] | 천공의아키 | 186 | 11-06 |
| 98262 | 소프트웨어| 포토샵 한글화 문의 [3] | 엉클퍼커 | 396 | 11-06 |
| 98261 | 소프트웨어| aimp 노멀라이징 기능을 어디서 켜나요? [2] | brucex | 200 | 11-06 |
| 98260 | 기 타| 엑셀질문 [4] | First. | 291 | 11-06 |
| 98259 | 기 타| 명령어로 한영 변경? [2] | 크런치 | 450 | 11-05 |
메세지 박스가 작아서 출력된 전체 내용을 볼수가 없는것이지요
메세지 박스 대신 clipboard로 출력을 해서 내용을 확인해보세요
2. Autohotkey에서 정규식 regexmatch 이용해서 추출하고 regexreplace를 이용해서 추출한 데이터를 처리해주시면 됩니다