네이버 카페 아이디 추출

refereced by chagaun.net, klicker.kr, rpahub.kr

https://chagaun.net, http://klicker.kr, http://rpahub.kr

안녕하세요.

업무자동화툴인 클리커를 통해 네이버 카페  아이디 목록을 추출하는 방법에 대해 설명해 보겠습니다.

네이버 카페 사이트가 변경이 되어 수집이 재대로 안되고 있었네요. 레시피를 다시 만들어 올립니다.

여기에서 설명하고 있는 레시피를 클리커에 탑재하여 실행하면 자동으로 네이버 카페 아이디 목록이 추출되는 것을 확인 하실 수 있습니다.

[사전 준비]

먼저 클리커가 내 피씨에 설치가 되어 있어야 합니다. 

클리커는 Windows 10, 11 환경에서 작동이 됩니다.

무료공개툴인 클리커의 설치를 위해서는 https://chagaun.net 홈페이지나 http://klicker.kr 를 통해 설치를 할 수 있습니다.

클리커는 기본적으로 C:\Chagaun에 설치가 됩니다.

설치를 하기 위해서는 아래의 chagaun.net 홈페이지의 다운로드 페이지를 통해 할 수 있습니다.

[네이버 카페 아이디 추출 실행방법]

1. 하단에 첨부된 레시피 파일을 다운로드한 후 아래의 폴더에 가져다 놓습니다.

C:\Chagaun\Klicker_2.5\data\recipe\ExtractNaverCafeIDs.json

2.클리커 설치 후 바탕화면에 생성된 클리커2.5 아이콘을 실행합니다.

3. 클리커 화면 상단에 있는 '로드' 버튼을 클릭하여 위의 ExtractNaverCafeIDs.json 파일을 탑재합니다.

4. 클리커 화면 하단에 있는 '테스크 실행'을 클릭하시면 탑재된 레시피가 실행이 되면서 크롬부라우저가 열리며 자동으로 네이버 카페 아이디가 추출되는 것을 확인할 수 있습니다.

[레시피 설명]

1. 네이버 카페->주제별->전체 페이지를 검색합니다.

2. 카페 목록 수집을 위한 변수를 할당합니다. 그리고 25개의 카테고리 페이지를 호출하기 위한 카테고리 목록을 만들어 냅니다.

3. 첫번째 카테고리인 '게임' 의 첫번째 페이지로 이동합니다.

4. 카페 아이디, 카페 URL, 카페 타이틀을 추출하여 카페 목록에 추가합니다.

5. 다음 페이지가 있는 경우 페이지를 이동합니다. 반복하여 이동하면서 모든 페이지를 이동하면서 카페 목록을 수집합니다.

6. 현재의 카테고리에 있는 모든 페이지를 수집한 후 다음 카테고리가 있는 경우 해당 카테고리로 이동합니다.

7. 모든 카페 목록이 수집된 후 다음 .csv, .json 파일로 저장합니다.

C:\Chagaun\Klicker_2.5\data\recipe\ExtractNaverCafeIDs\ExtractNaverCafeIDs_result.csv

C:\Chagaun\Klicker_2.5\data\recipe\ExtractNaverCafeIDs\ExtractNaverCafeIDs_result.json

25개의 각 카테고리에는 1,000개의 페이지가 존재하며 각 페이지에는 18개의 카페 목록이 존재하네요

25 * 1000 * 18 = 450,000

업무자동화(RPA)툴인 클리커(Klicker)를 통해 인터넷으로부터 데이터의 수집이나 가공, 엑셀데이터의 읽기, 정제, 저장 등을 할수 있습니다.

그리고 ChatGPT를 통한 문서의 재작성이나 요약을 할 수 있고 StableDiffusion을 통해 텍스트와 관련한 이미지들을 생성해 낼 수 있습니다.

이렇게 수집된 텍스트와 이미지들을 활용하여 영상을 자동으로 생성하여 유튜브에 바로 올릴 수도 있습니다.

또한 파파고, 구글번역, 칼로 등 공개된 다양한 API를 호출하여 새로운 서비스를 생성해 낼수 있습니다.

이러한 모든 작업들은 chagaun.net, klicker.kr rpahub.kr를 통해 공개된 무료 RPA 툴(클리커)을 통해 만나볼 수 있을 것입니다.

설명이 부족하여 이해가 잘 안되거나 문의가 필요한 경우 메일(chagaunnet@gmail.com)이나 사이트(chagaun.net)에 글을 남겨 주시면 성실히 대응해 드리겠습니다.