썬더비트(Thunderbit.ai) 분석: AI 기반 노코드 웹 데이터 추출 도구
Thunderbit.ai는 코딩 없이도 웹 데이터를 추출하고,
웹 자동화 워크플로우를 구축할 수 있는 AI 기반의 노코드 솔루션입니다.
1. 도구 요약
- 한 줄 요약: AI가 웹페이지 구조를 자동 분석하여 클릭만으로 데이터를 추출하고, 복잡한 반복 작업을 자동화하는 도구입니다.
- 상세 설명:
- 사용자 친화성: 코딩 지식 없이도 누구나 쉽게 데이터를 추출할 수 있도록 설계되었습니다. 특히, 데이터 수집을 원하는 내용을 자연어로 입력하면 AI가 자동으로 스크래퍼를 설정해줍니다.
- 다양한 소스 지원: 웹페이지뿐만 아니라 PDF, 이미지 등 다양한 문서에서 데이터를 추출할 수 있습니다.
- 효율성: AI가 서브페이지를 자동으로 탐색하여 필요한 정보를 추가로 수집하는 등, 단순 반복 작업을 줄여 업무 효율성을 높여줍니다.
2. 핵심 기능: 깔끔하게 한눈에 보기
| 기능 | 설명 |
| AI 기반 자동 추출 | AI가 웹페이지 구조를 자동으로 분석하여 데이터를 표 형태로 추출합니다. |
| 자연어 기반 설정 | 수집을 원하는 데이터의 내용을 자연어로 입력하면 AI가 자동으로 스크래퍼를 설정해줍니다. |
| 다양한 소스 지원 | 웹사이트 외에도 PDF, 이미지 등 다양한 형태의 문서에서 데이터를 추출할 수 있습니다. |
| 서브페이지 자동 탐색 | AI가 서브페이지를 자동으로 방문하여 추가 정보를 수집하고 기존 데이터에 통합합니다. |
| 데이터 연동 및 자동화 | 추출한 데이터를 구글 시트, Notion 등 다양한 도구로 자동 전송하고 반복 작업을 자동화합니다. |
3. 업무 활용 분야 & 한계점
3.1. 가장 적합한 활용 분야
- 웹페이지 크롤링에 특화: 웹페이지에 있는 데이터를 추출하는 데 유용한 도구입니다.
- 웹페이지에 대한 구조를 잘 모르는 경우: AI가 사용자가 입력한 내용을 이해하여 스크래핑을 진행하기 때문에, 코딩 지식이 없는 사람에게 유용
- 서브페이지 데이터 추출: Octoparse AI의 경우 서브 페이지를 읽어오기 위해 워크플로우에 대해 이해하고 설정해야 하는 반면,
해당 도구는 서브페이지 데이터 수집 옵션이 있어 매우 유용
3.2. 활용 한계점
- 복잡한 동적 웹사이트: 자바스크립트 기반의 복잡한 동적 웹사이트에서는 일부 데이터 추출이 어려울 수 있습니다.
- 고도의 커스터마이징 제약: 특정 조건에 따라 세세하게 데이터를 수집해야 하는 경우에는 한계가 있습니다.
- 서브 페이지의 데이터를 추출할 수는 있지만, 가져오는 결과값에 대한 정확도에는 제약이 있을 수 있습니다.
4. 사용자별 관점 분석
| 사용자 유형 | 👍 장점 | 👎 단점 |
| 개발자 관점 | - 간단한 데이터 수집 및 자동화 작업을 빠르게 처리할 수 있습니다. - 반복적인 스크래핑 스크립트 작성 시간을 절약할 수 있습니다. - 코딩 지식이 전혀 필요 없습니다. - 직관적인 UI와 자연어 기반 설정으로 쉽게 시작할 수 있습니다. |
- 고도의 기술적 제어가 필요한 경우에는 기존 스크립트 작성 방식이 더 효율적일 수 있습니다. |
| 비개발자 관점 | - 매우 복잡하거나 특수한 데이터 추출 시 기술적 한계를 느낄 수 있습니다. |
5. 비용
- 무료: 7일 무료 트라이얼 제공
- 유료: 월 $24 (기능에 따라 가격 상이)
6. 기능 활용 가이드
- 사용 일자: 2025-09-03
- 사용 예시는 2025-09-03에 작성된 내용이며, 향후 서비스 업데이트에 따라 화면 구성이나 기능에 차이가 있을 수 있습니다.
1️⃣ Thunderbit AI는 크롬 확장 프로그램 다운로드형 UI를 제공하고 있어, 다운로드 과정이 필요합니다.
다운로드 후에는 크롤링하고자 하는 웹사이트에 접속한 후, 확장 프로그램을 클릭하여 도구를 사용할 수 있습니다.
- 크롤링하고자 하는 페이지에 접속 후, 'AI Suggest Fields'를 클릭하여 자동으로 수집할 수 있는 데이터 필드 영역을 제공받을 수 있습니다.
2️⃣ 다음과 같이 해당 페이지의 영역을 읽어, 가지고 올 수 있는 데이터 필드명을 자동으로 생성해줍니다.
3️⃣ 수집하고자 하는 영역이 더 있을 시에는 'Add a Field'를 클릭하여 필드를 추가합니다.
더불어, 추가한 필드의 영역에 값을 어떻게 채워넣을 것인지에 대한 프롬프트를 작성하면 입력된 프롬프트에 맞춰 수집을 진행합니다.
4️⃣ 만약 메인 페이지 이외에, 메인 페이지 안에 있는 링크에 접속하여 값을 수집해와야 하는 경우에는
'Scrape Subpages' 기능을 통해, 서브페이지를 탐색하여 데이터 수집을 진행할 수 있습니다.
예시) 메인페이지에 있는 뉴스 기사의 댓글을 수집하고 싶은 경우에는, 해당 기사를 클릭하여 수집해야 하는 경우 존재
5️⃣ 'Scrape'를 클릭하여 크롤링을 진행합니다. 아래의 화면과 같이 데이터가 수집된 것을 확인할 수 있습니다.
