100 크레딧 무료, 카드 등록 없이지금 시작하기
Logo
Wikipedia logoWikipedia API

Wikipedia 문서 텍스트 데이터 API

SocialCrawl API 키로 모든 언어의 Wikipedia를 검색하고 문서 전체를 페이지 ID, 리비전, 동음이의어 여부와 함께 일반 텍스트 구조화 JSON으로 가져옵니다. 호출은 크레딧으로 과금됩니다.

Wikipedia logo
/v1/wikipedia

활성 엔드포인트는 2개입니다. 문서 검색과 문서 전체 텍스트를 지원합니다.

  • GET /v1/wikipedia/search
  • GET /v1/wikipedia/article

Wikipedia 엔드포인트

모든 언어판 Wikipedia를 읽는 엔드포인트는 2개입니다. 키워드로 검색한 뒤 문서 하나를 전체로 읽습니다.

문서 검색

1 크레딧
/v1/wikipedia/search

검색어에 맞는 문서를 언어별로 반환하며, 각 문서의 페이지 ID, 제목, 링크, 일치하는 구절의 일반 텍스트, 단어 수, 마지막 변경 시각이 포함됩니다. 페이지당 최대 50개, 100페이지까지 Wikipedia의 전체 결과 수와 함께 조회합니다. 표준 티어(1 크레딧)입니다.

query, language, page, limit

문서 텍스트

1 크레딧
/v1/wikipedia/article

제목이나 링크로 문서 하나를 반환합니다. 섹션 제목이 포함된 일반 텍스트 전체 문서, 페이지 ID, 링크, 리비전 ID, 마지막 변경 시각, 크기, 동음이의어 문서 여부가 포함됩니다. 넘겨주기는 따라갑니다. Wikipedia에 없는 제목은 404를 반환하며 과금되지 않습니다. 표준 티어(1 크레딧)입니다.

title or url, language

Wikipedia API2개 엔드포인트 지원
문서 보기
Articles

Wikipedia 문서 하나를 언어와 상관없이 일반 텍스트로 반환하고 페이지 ID, 링크, 리비전, 동음이의어 문서 여부를 함께 제공합니다.

리서치나 요약, 개체 조회, AI 답변의 근거 자료로 문서 전체를 읽을 때 사용하세요.

1크레딧

GET/v1/wikipedia/article?title=Python+%28programming+language%29
$ curl https://www.socialcrawl.dev/v1/wikipedia/article?title=Python+%28programming+language%29 \
    -H "x-api-key: sc_YOUR_API_KEY"
대기 중
// 실제 실행에는 API 키가 필요합니다. "실행해보기"를 누르면 예시 응답을 표시합니다

Wikipedia API 동작

Wikipedia도 SocialCrawl의 일반 데이터 표면입니다. API 키로 GET /v1/wikipedia/…를 호출하고, 실시간 조회에만 크레딧을 쓰며, 하나의 JSON 응답 형식을 받습니다.

호출 인증

x-api-key 헤더에 키를 보냅니다. 공개 읽기에 Wikipedia 계정은 필요 없습니다. SocialCrawl 전 플랫폼에 같은 키를 사용합니다.

쿼리 파라미터로 GET 호출

검색은 query, language, page, limit을 받습니다. 문서는 title이나 url과 language를 받습니다. 과금 전에 형식을 검증합니다.

좌석이 아닌 크레딧 과금

모든 Wikipedia 경로는 1 크레딧입니다. 캐시 적중은 0 크레딧입니다.

하나의 JSON 응답 형식

모든 응답은 success, data, credits_used, credits_remaining, request_id, cached로 같은 형태입니다. 페이지가 있는 경로의 목록에는 pagination이 함께 담깁니다.

일반적인 연동 흐름

대부분 제품은 주제를 한 번 검색한 뒤 필요한 문서를 전체로 읽습니다.

01문서 검색
GET /v1/wikipedia/search?query=…

제목, 구절, 단어 수가 담긴 문서 PostList

알맞은 문서나 이름의 알맞은 의미를 찾습니다.

02문서 읽기
GET /v1/wikipedia/article?title=…

일반 텍스트 전체 문서가 담긴 Post

한 번의 호출로 섹션별로 나누기 쉬운 본문을 받습니다.

03다른 언어로 읽기
GET /v1/wikipedia/article?title=…&language=de

다른 언어판의 같은 주제 Post

언어마다 별도의 Wikipedia와 문서가 있습니다.

요청
GET /v1/wikipedia/search?query=python+programming
Host: www.socialcrawl.dev
x-api-key: sc_your_api_key_here

GET /v1/wikipedia/article?title=Python+(programming+language)
응답 봉투
{
  "success": true,
  "data": {
    "post": {
      "id": "23862",
      "url": "https://en.wikipedia.org/wiki/Python_(programming_language)",
      "content": { "text": "Python is a high-level, general-purpose programming language. ..." },
      "ext": {
        "title": "Python (programming language)",
        "wikipedia": { "language": "en", "is_disambiguation": false, "revision_id": "1386743958" }
      }
    }
  },
  "credits_used": 1,
  "credits_remaining": 9999,
  "request_id": "req_…",
  "cached": false
}

data에 담기는 내용

아키타입이 같으면 필드 이름도 SocialCrawl 전체와 같습니다. 한 번 파싱해 모든 플랫폼에 재사용합니다.

PostListsearch

items[]에 post.id(페이지 ID), ext.title, url, content.text(일치하는 구절), ext.wikipedia word_count, updated_at

Postarticle

content.text(일반 텍스트), ext.title, url, ext.wikipedia language, is_disambiguation, revision_id가 담긴 문서

게이트웨이 내부 처리

다른 /v1 플랫폼 엔드포인트와 같은 요청 수명 주기를 따릅니다. Wikipedia는 별도 부가 기능이 아닙니다.

  1. 01

    엣지에서 호출 수신

    Next.js catch-all 경로가 Hono social API로 전달합니다. request_id를 발급하고 키를 인증한 뒤 속도 제한(분당 600회)과 동시성(키당 50건)을 적용합니다.

  2. 02

    검증 후 차감

    레지스트리에서 wikipedia 경로를 찾습니다. 필수 파라미터와 형식 검사를 먼저 실행합니다. 잘못된 입력은 과금 없이 400을 반환합니다. 유효한 호출은 조회 전에 티어 비용을 원자적으로 차감합니다.

  3. 03

    캐시 또는 조회

    platform, resource, params로 결정적 캐시 키를 만듭니다. 적중하면 즉시 반환하고 credits_used는 0입니다. 미스이면 공개 데이터를 실시간으로 읽으며, 5xx나 네트워크 오류는 재시도하고 소스가 불안정하면 서킷 브레이커가 작동합니다.

  4. 04

    정규화 후 반환

    Wikipedia 데이터를 Post와 PostList 아키타입으로 매핑하고 Wikipedia 고유 정보는 ext.wikipedia에 담아 검증한 뒤, 성공 응답으로 감싸 과금 감사용으로 기록합니다.

운영에서 중요한 과금 규칙

  • search, article: 1 크레딧
  • 캐시 적중: 0 크레딧
  • 빈 결과나 실패: 자동 환불
  • 잘못된 파라미터: 400, 과금 없음
  • 크레딧 부족: 402, 과금 없음
  • 없는 제목: 404, 과금 없음
  • 페이지당 최대 50개, 100페이지
  • 문서 본문은 일반 텍스트
  • 편집, 계정 데이터 미지원

Wikipedia 데이터 수집 방식

Wikipedia 데이터는 공개 데이터입니다. SocialCrawl 스키마로 정규화하므로 별도 공급사 SDK를 익힐 필요가 없습니다.

이 API에서 Wikipedia의 의미

모든 언어판 Wikipedia의 공개 문서와 각 문서의 페이지 ID, 리비전, 링크입니다.

SocialCrawl의 수집 방식

공개 데이터를 요청 시 각 소스의 공개 이용 규칙 안에서 읽어 서버에서 정규화합니다.

엣지에서 나가는 데이터

검색은 PostList, 문서는 Post로 공통 형태입니다. Wikipedia 고유 정보는 ext.wikipedia에 담깁니다.

실시간으로 제공하지 않는 데이터

편집, 토론 문서, 사용자 계정, 문서 역사는 제공하지 않습니다.

필드 매핑
page id, title, link→ post.*페이지 ID, 제목, 링크
article text→ post.content.text문서 본문, 섹션 제목
revision, disambiguation→ post.ext.wikipedia리비전, 마지막 변경, 동음이의어 여부

이 API의 활용 분야

이 API가 가장 많이 쓰이는 작업입니다.

2active Wikipedia endpoints in the registry
1모든 Wikipedia 경로의 호출당 크레딧

리서치, 개체 조회, AI 답변의 근거 확보

호출하는 쪽은 주제나 이름을 검색한 뒤 필요한 문서를 작업하는 언어로 전체 읽습니다. 모든 언어의 문서 전체를 일반 텍스트로 공통 Post 스키마에 담아 카탈로그 전체와 같은 키로 제공합니다.

캐시 미스는 공개 소스를 요청 시 읽습니다. 반복 호출은 캐시에서 0 크레딧으로 처리됩니다.

활용 사례

팀이 이 데이터를 활용하는 대표적인 방식과 주로 쓰는 기술 스택입니다.

AI 근거 확보

Python, 검색 파이프라인

주제로 search를 호출한 뒤 article로 문서를 읽어 출처가 있는 답변의 근거로 씁니다.

개체 리서치

Python, 노트북

기업이나 인물로 search를 호출하고 동음이의어 여부를 확인한 뒤 알맞은 문서를 읽습니다.

현지화

Node, 예약 작업

같은 주제를 여러 언어로 article로 읽어 언어판마다 다루는 내용을 비교합니다.

Wikipedia API 호출 방법

모든 Wikipedia 경로는 1 크레딧입니다. 캐시 적중은 무료입니다.

curl "https://www.socialcrawl.dev/v1/wikipedia/search?query=python%20programming" \
  -H "x-api-key: sc_your_api_key_here"
curl "https://www.socialcrawl.dev/v1/wikipedia/article?title=Python%20(programming%20language)" \
  -H "x-api-key: sc_your_api_key_here"
Wikipedia logoSocialCrawl의 Wikipedia

카탈로그 전체와 같은 키

엔드포인트

Wikipedia API는 어떤 데이터를 돌려주나요

모든 엔드포인트가 같은 응답 구조의 JSON을 보내드려요. 엔드포인트가 해당 지표를 지원하고 계산에 필요한 원본 값이 있을 때만 참여율·콘텐츠 카테고리 같은 계산 필드가 포함돼요.

자주 묻는 질문

자주 묻는 질문

API, 요금제, 기능에 대한 질문과 답변입니다.

문의하기
SocialCrawl 위키백과 API는 무엇을 제공하나요?
2개 엔드포인트, Article and Search를 제공해요. 언어별로 문서를 검색하고 문서 하나를 일반 텍스트 전체로 읽으며, 다른 94개 플랫폼과 같은 통합 JSON으로 와요.
어떤 언어를 지원하나요?
모든 언어판 위키백과를 지원해요. language에 en, de, fr, ko 같은 코드를 넣거나 문서 링크를 넣으면 링크에서 언어를 읽어요.
문서 본문이 HTML로 오나요?
아니요. 문서는 섹션 제목이 줄마다 나뉜 일반 텍스트로 와서 검색, 요약, AI 파이프라인에 바로 쓸 수 있어요.
뜻이 여러 개인 제목은 어떻게 되나요?
동음이의어 문서가 오고 post.ext.wikipedia.is_disambiguation으로 표시돼요. 원하는 뜻의 제목으로 다시 읽으면 돼요.
비용은 얼마인가요?
호출마다 1 크레딧이고 캐시 적중은 무료예요. 없는 제목은 404로 응답하고 과금되지 않아요. 무료 100 크레딧으로 시작해요.
Wikipedia 데이터 스크래핑, 법적으로 괜찮을까요?
SocialCrawl은 누구나 볼 수 있는 공개 Wikipedia 데이터만 돌려드리고, 로그인이 필요한 비공개 콘텐츠에는 접근하지 않아요. 다만 실제 적법성은 활용 목적과 국가별 법률에 따라 달라져요. Wikipedia 이용약관과 GDPR·CCPA 같은 개인정보 보호 법규를 지키는 책임은 이용자에게 있어요. 이 답변은 일반 안내일 뿐, 법률 자문은 아니에요.
Wikipedia 스크래핑 API와 공식 Wikipedia API는 뭐가 다른가요?
SocialCrawl은 앱 심사나 승인 대기가 없어요. 가입 직후 x-api-key 하나로 Wikipedia 엔드포인트를 바로 호출할 수 있고, 응답은 다른 모든 플랫폼과 같은 통합 스키마로 와요. 요금도 플랫폼별 쿼터 대신 크레딧으로 계산해요. 글 게시 같은 쓰기 작업이 필요하다면 공식 API가 맞아요. SocialCrawl은 읽기 전용 데이터만 다뤄요.

AI에게 SocialCrawl을 물어보세요

Wikipedia API 레퍼런스 문서 보기

🤖 AI 에이전트나 LLM이신가요? 이 페이지를 markdown으로 읽어보세요