PGR21.com
- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다.
통합 규정을 준수해 주십시오. (2015.12.25.)
Date 2024/08/16 15:28:50
Name 한루나
Subject [질문] 게임결과 분석툴 개발(크롤링) 질문
안녕하세요. 개발자가 아닌데, 최근 게임 제작에 재미를 붙이면서 chatgpt로 코드를 짜고 만들어 보고 있습니다.
구현하고 싶은 기능 중에 게임 랭킹을 만드는 부분이 있는데요,
웹에서 게임 기록을 조회 가능한데, 이것을 크롤링하는 부분에서 애를 먹고 있습니다.

요약하면, 스타크래프트2는 각 맵이나 모드에서 실행되는 공개 방의 게임 결과를 모니터링하여 웹에 송출하고 있습니다.
이 데이터를 취합하여 유저간 MMR을 구축하는 것이 제 목표입니다.

대상 사이트는 아래이고,
https://sc2arcade.com/map/3/175107/lobbies-history
위 사이트의 개별 게임마다 details를 클릭하면 플레이어와 승패가 노출됩니다.
이 정보를 크롤링할 수 있을까요? F12를 눌러서 소스를 봐도 마땅히 연결되는 것이 없어서..

혹시 고수분들께서, 이것이 간단히 가능한 일이다, 개발자의 도움 없이는(chatgpt를 잘쓴다고 하더라도) 어렵다 간단히 감만 알려주셔도 큰 도움이 될 것 같습니다!
혹시 간단히 만들어주실 수 있는 분 계시다면 소액의 보수를 드리고 의뢰드릴 수도 있습니다!

통합규정 1.3 이용안내 인용

"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.
법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
안군시대
24/08/16 15:43
수정 아이콘
f12 뉼러서 네트워크쪽을 보니까 정보를 xhr 형식으로 긁어올 수 있군요.

https://sc2arcade.com/api/lobbies/history?regionId=3&mapId=175107&includeMatchResult=true&limit=20
위의 주소를 GET으로 열면 json 형태로 정보를 가져옵니다. 각 파라미터들이 지역, 맵 등등을 지정하는 것 같고요.
이걸 이용하면 전적 데이터를 가져올 순 있겠지만, 이런식으로 사용하는 게 좋지는 않을 것 같아요. 저 사이트에 도움은 안되고 DB만 긁어가는 셈이라..

아, 저 사이트에서 API를 공식 제공하고 있군요.
https://api.sc2arcade.com/docs/api/index.html
여기 API 명세가 있으니, 이걸 이용하시면 될 듯 합니다.
한루나
24/08/16 16:03
수정 아이콘
댓글 대단히 감사드립니다.
API 명세를 실시간으로 연동해서 지속적으로 MMR을 업데이트하도록 구현하는 것도 가능할까요?
개발 지식이 없다보니..ㅠㅠ 따로 쪽지 드리겠습니다!
우울한구름
24/08/16 15:45
수정 아이콘
모바일로만 쓱 보긴 했는데, 저 정도면 셀레니움 써서 하시면 어렵지 않게 되긴 할겁니다. 아니면 어느정도 수집을 생각하시는 모르겠는데, 메인 페이지에서 디테일스의 주소를 수집한 다음에 디테일스 페이지의 정보를 따오셔도 되구요.
한루나
24/08/16 16:05
수정 아이콘
감사합니다! 제가 아직 개발 지식 없다보니 진도를 나가기가 쉽지 않네요 ㅠㅠ 우선 윗 댓글로 말씀주신 내용을 시도해보겠습니다.
상상속의동물기린
24/08/17 03:19
수정 아이콘
크롤링만이 목적이면 WebZip 같은 도구를 사용하셔도 됩니다.
크롤링 할 때 주의하실 점 중의 하나가 politeness (즉, 너무 빨리 대량의 문서를 긁어오지 않는 것)인데 그런 부분도 잘 챙겨줍니다.
html 파일, css 파일, js 파일 다 따로 떼어서 다운 받아주니 일단 시작하시기엔 좋을 겁니다.
한루나
24/08/17 15:53
수정 아이콘
감사드립니다!
해당 사이트의 소스 구조를 분석해서 어느 부분의 데이터를 따와야되는지 부분에서 막히고 있었습니다 ㅜ 말씀주신 프로그램 잘 활용해 보겠습니다!
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
177509 [질문] 블랙박스 인터넷 구매 및 설치 질문 [2] 파르셀3142 24/08/16 3142
177508 [질문] 목소리와 관련된 문제인데 어디를 가야 할까요? [8] 이오르다체2960 24/08/16 2960
177507 [질문] 중고차 관련 질문 [9] 4월3355 24/08/16 3355
177506 [질문] 게임결과 분석툴 개발(크롤링) 질문 [6] 한루나3040 24/08/16 3040
177505 [질문] 괌 여행 보통 어떻게들 가시나요? 3박4일이면 너무 짧을까요? [4] LG의심장박용택3484 24/08/16 3484
177504 [질문] 이틀간 집중해서 즐길 플스5 타이틀 추천 [14] deadbody4439 24/08/16 4439
177503 [질문] 영화 리볼버 질문 스포무 [1] 마제스티2410 24/08/16 2410
177502 [질문] 비염같이 알러지 질환은 평생 달고 살아야하나요? [12] 그냥달려2944 24/08/16 2944
177501 [질문] 애플워치5 44m 에르메스 버전을 어떻게 처리할까요? [5] EY2979 24/08/16 2979
177500 [질문] 보는 재미 스타 vs 롤? [22] 사이먼도미닉3482 24/08/16 3482
177499 [질문] 노래를 찾습니다. [8] 여자친구3556 24/08/15 3556
177498 [질문] LCK 경기 예매 시 홈, 어웨이 안 보이는 이유 [2] 쑈메3395 24/08/15 3395
177497 [질문] (라팍) 부모님 야구 첫 직관가시는데 좌석이 어디가 좋나용? [17] Cand3776 24/08/15 3776
177496 [질문] 중고 현기 suv 추천 부탁드립니다 [7] 사이시옷3797 24/08/15 3797
177495 [질문] 제주 서귀포쪽 맛집이랑 갈만한 곳 추천좀 해주세요!! [6] 공업저글링3147 24/08/15 3147
177494 [질문] 건조기 냄새날 때 방법. 도와주세요ㅜ [8] 오타니2721 24/08/15 2721
177493 [질문] 유튜브 재생바 색깔 변경이 언제부터 되었을까요? [2] poniard3284 24/08/15 3284
177492 [질문] 가전제품 as 5분만에 7만원이면 깎아달라고 하나요? [103] 붕붕붕6195 24/08/15 6195
177491 [질문] DJI 포켓 2 or 액션 4, 현재 구매할만할까요? [7] 레이오네2606 24/08/15 2606
177490 [질문] (사진) 이럴때 필요한 공구 이름이 있을까요? [10] mcmc3694 24/08/15 3694
177489 [질문] 컴퓨터 견적문의입니다.(마지막) [2] BBsDaddy2995 24/08/15 2995
177488 [질문] 아이패드 종이질감필름 질문입니다 [2] 월터화이트3013 24/08/15 3013
177487 [질문] 그래픽카드 이상 문의드려봅니다! [2] 삼성2696 24/08/15 2696
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
맨 위로