본문으로 건너뛰기

데이터 가져오기

데이터 가져오기(/get-data)는 GenD 데이터 수집의 단일 진입점입니다. 메뉴 경로: 사이드바 → 데이터 엔지니어링 → 데이터 가져오기.

수집 기능이 4개 화면(DB 연결 / 파일·문서 수집 / 직접 조립 파이프라인 / 공용 수집기 (관리형))에 분산되어 이름만으로는 무엇을 골라야 할지 알기 어렵다는 혼란을 해소하는 라우터 페이지입니다. 화면 상단 안내 문구 그대로 — "무엇을 가져오려 하시나요? 상황에 맞는 기능으로 안내합니다." 카드 4장이 각 기능의 "적합한 경우"를 설명하고 해당 화면과 가이드 문서로 안내합니다.

카드 4장​

카드설명적합한 경우이동 경로
DB 연결PostgreSQL·MySQL 등 운영 DB 를 연결해 SQL 로 바로 조회이미 DB 에 있는 정형 데이터를 연결만 하면 될 때/connectors
파일·문서 수집S3/SFTP/웹크롤 등에서 파일·문서를 정기 반입 — 파싱→검색 인덱스까지 표준 처리 자동문서를 검색(RAG)에 쓰는 게 목적일 때/ingestion
직접 조립 파이프라인외부 API·문서 처리·변환을 노드로 직접 설계 (Pipeline Studio)외부 API 수집, 커스텀 처리, 결과의 MCP 도구화가 필요할 때/pipeline-studio
공용 수집기 (관리형)공시·시세·거시 등 플랫폼 공용 데이터 — 관리자가 등록, 모두가 인텔리전스 메뉴에서 조회전사가 함께 쓸 표준 데이터일 때 (비관리자는 관리자에게 요청)/admin/intel-sources (관리자 전용 등록)

데이터 가져오기 허브 — DB 연결 / 파일·문서 수집 / 직접 조립 파이프라인 / 공용 수집기 (관리형) 카드 4장과 각 카드의 이동·가이드 버튼

각 카드에는 두 개의 버튼이 있습니다.

  • 가이드 보기 — 해당 기능의 문서 가이드를 새 탭으로 엽니다
  • 이동 버튼(카드 제목과 동일 라벨) — 해당 화면으로 바로 이동합니다

카드별 가이드 문서:

공용 수집기 (관리형) — 비관리자 안내​

공용 수집기 등록 화면(/admin/intel-sources)은 관리자 전용이므로 카드에 관리자 전용 등록 배지가 표시됩니다. 비관리자에게는 dead-end 가 되지 않도록 이동 버튼 대신 인텔리전스에서 조회 버튼이 표시되며, 수집 결과를 소비하는 시세(/intel/market) 화면으로 안내합니다 (#2479).

전사가 함께 쓸 표준 데이터가 필요한 비관리자는 관리자에게 공용 수집기 등록을 요청하세요. 요청 시 전달할 정보:

  • 소스 URL (또는 거래소·심볼 등 대상 식별 정보)
  • 수집 주기
  • 필요한 파라미터 (API 키 발급처, 필터 조건 등)

어떤 기능을 골라야 할지 헷갈린다면​

카드의 "적합한 경우" 축과 동일한 기준으로 정리된 데이터 수집, 어떤 기능으로? 결정 가이드를 참조하세요.

관련 문서​