PGR21.com
- PGR21 관련된 질문 및 건의는 [건의 게시판]을 이용바랍니다.
- (2013년 3월 이전) 오래된 질문글은 [이전 질문 게시판]에 있습니다.
통합 규정을 준수해 주십시오. (2015.12.25.)
Date 2024/08/16 15:28:50
Name 한루나
Subject [질문] 게임결과 분석툴 개발(크롤링) 질문
안녕하세요. 개발자가 아닌데, 최근 게임 제작에 재미를 붙이면서 chatgpt로 코드를 짜고 만들어 보고 있습니다.
구현하고 싶은 기능 중에 게임 랭킹을 만드는 부분이 있는데요,
웹에서 게임 기록을 조회 가능한데, 이것을 크롤링하는 부분에서 애를 먹고 있습니다.

요약하면, 스타크래프트2는 각 맵이나 모드에서 실행되는 공개 방의 게임 결과를 모니터링하여 웹에 송출하고 있습니다.
이 데이터를 취합하여 유저간 MMR을 구축하는 것이 제 목표입니다.

대상 사이트는 아래이고,
https://sc2arcade.com/map/3/175107/lobbies-history
위 사이트의 개별 게임마다 details를 클릭하면 플레이어와 승패가 노출됩니다.
이 정보를 크롤링할 수 있을까요? F12를 눌러서 소스를 봐도 마땅히 연결되는 것이 없어서..

혹시 고수분들께서, 이것이 간단히 가능한 일이다, 개발자의 도움 없이는(chatgpt를 잘쓴다고 하더라도) 어렵다 간단히 감만 알려주셔도 큰 도움이 될 것 같습니다!
혹시 간단히 만들어주실 수 있는 분 계시다면 소액의 보수를 드리고 의뢰드릴 수도 있습니다!

통합규정 1.3 이용안내 인용

"Pgr은 '명문화된 삭제규정'이 반드시 필요하지 않은 분을 환영합니다.
법 없이도 사는 사람, 남에게 상처를 주지 않으면서 같이 이야기 나눌 수 있는 분이면 좋겠습니다."
안군시대
24/08/16 15:43
수정 아이콘
f12 뉼러서 네트워크쪽을 보니까 정보를 xhr 형식으로 긁어올 수 있군요.

https://sc2arcade.com/api/lobbies/history?regionId=3&mapId=175107&includeMatchResult=true&limit=20
위의 주소를 GET으로 열면 json 형태로 정보를 가져옵니다. 각 파라미터들이 지역, 맵 등등을 지정하는 것 같고요.
이걸 이용하면 전적 데이터를 가져올 순 있겠지만, 이런식으로 사용하는 게 좋지는 않을 것 같아요. 저 사이트에 도움은 안되고 DB만 긁어가는 셈이라..

아, 저 사이트에서 API를 공식 제공하고 있군요.
https://api.sc2arcade.com/docs/api/index.html
여기 API 명세가 있으니, 이걸 이용하시면 될 듯 합니다.
한루나
24/08/16 16:03
수정 아이콘
댓글 대단히 감사드립니다.
API 명세를 실시간으로 연동해서 지속적으로 MMR을 업데이트하도록 구현하는 것도 가능할까요?
개발 지식이 없다보니..ㅠㅠ 따로 쪽지 드리겠습니다!
우울한구름
24/08/16 15:45
수정 아이콘
모바일로만 쓱 보긴 했는데, 저 정도면 셀레니움 써서 하시면 어렵지 않게 되긴 할겁니다. 아니면 어느정도 수집을 생각하시는 모르겠는데, 메인 페이지에서 디테일스의 주소를 수집한 다음에 디테일스 페이지의 정보를 따오셔도 되구요.
한루나
24/08/16 16:05
수정 아이콘
감사합니다! 제가 아직 개발 지식 없다보니 진도를 나가기가 쉽지 않네요 ㅠㅠ 우선 윗 댓글로 말씀주신 내용을 시도해보겠습니다.
상상속의동물기린
24/08/17 03:19
수정 아이콘
크롤링만이 목적이면 WebZip 같은 도구를 사용하셔도 됩니다.
크롤링 할 때 주의하실 점 중의 하나가 politeness (즉, 너무 빨리 대량의 문서를 긁어오지 않는 것)인데 그런 부분도 잘 챙겨줍니다.
html 파일, css 파일, js 파일 다 따로 떼어서 다운 받아주니 일단 시작하시기엔 좋을 겁니다.
한루나
24/08/17 15:53
수정 아이콘
감사드립니다!
해당 사이트의 소스 구조를 분석해서 어느 부분의 데이터를 따와야되는지 부분에서 막히고 있었습니다 ㅜ 말씀주신 프로그램 잘 활용해 보겠습니다!
목록 삭게로! 맨위로
번호 제목 이름 날짜 조회
177521 [질문] 에이리언 로물루스 보기전 봐야될게 있을까요? [8] 핸드레이크3125 24/08/17 3125
177520 [질문] 귀염뽀짝 같은 느낌의 4글자 단어 혹시 아시는 거 있나요? [7] bifrost3029 24/08/17 3029
177519 [질문] 요즘 야구장에서도 몇 회 이후 무료 입장 이런거 있나요? [2] Openedge3777 24/08/17 3777
177518 [질문] [스포] 에이리언 1, 프로메테우스 질문입니다. [3] 짐바르도3474 24/08/17 3474
177517 [질문] 스포티비 나우로 PL보시는 분들 [4] 아르키메데스3517 24/08/17 3517
177516 [질문] 본즈라는 미국 드라마 보신 분 계신가요? [1] 샤르미에티미3129 24/08/17 3129
177515 [질문] 현재 낙태죄 형법 조항이 삭제된 상황에서 임신한 여성의 자기결정권의 보장을 위하여 국회는 아무런 입법을 하지 않아야 한다. [1] 삭제됨3602 24/08/17 3602
177514 [질문] 갤럭시S 21, 22 게임만 돌리는 걸로 놓고 볼때 비교 좀 부탁드려두 될까요? [4] 보로미어3596 24/08/17 3596
177513 [질문] 누구 배우, 누구 배우님 호칭은 언제부터 왜 쓰는 건가요? [23] 샤크어택4222 24/08/17 4222
177512 [질문] 버스운전자격증에 대해 [1] 흰둥3702 24/08/16 3702
177511 [질문] 제주도 수영하기 좋은 바닷가 추천 부탁드립니다. [14] 고우 고우3187 24/08/16 3187
177510 [질문] 외국에서는 무료 화상회의 어플로 어떤 것을 많이 쓰는지요..? [13] nexon3115 24/08/16 3115
177509 [질문] 블랙박스 인터넷 구매 및 설치 질문 [2] 파르셀3364 24/08/16 3364
177508 [질문] 목소리와 관련된 문제인데 어디를 가야 할까요? [8] 이오르다체3085 24/08/16 3085
177507 [질문] 중고차 관련 질문 [9] 4월3534 24/08/16 3534
177506 [질문] 게임결과 분석툴 개발(크롤링) 질문 [6] 한루나3224 24/08/16 3224
177505 [질문] 괌 여행 보통 어떻게들 가시나요? 3박4일이면 너무 짧을까요? [4] LG의심장박용택3692 24/08/16 3692
177504 [질문] 이틀간 집중해서 즐길 플스5 타이틀 추천 [14] deadbody4685 24/08/16 4685
177503 [질문] 영화 리볼버 질문 스포무 [1] 마제스티2605 24/08/16 2605
177502 [질문] 비염같이 알러지 질환은 평생 달고 살아야하나요? [12] 그냥달려3148 24/08/16 3148
177501 [질문] 애플워치5 44m 에르메스 버전을 어떻게 처리할까요? [5] EY3379 24/08/16 3379
177500 [질문] 보는 재미 스타 vs 롤? [22] 사이먼도미닉3654 24/08/16 3654
177499 [질문] 노래를 찾습니다. [8] 여자친구3717 24/08/15 3717
목록 이전 다음
댓글

+ : 최근 1시간내에 달린 댓글
+ : 최근 2시간내에 달린 댓글
맨 위로