크롤링 (Crawling)

정의

API로 제공되지 않는 첨부파일 내 텍스트 등을 웹에서 직접 수집하는 기술.

나라장터·공공조달에서 크롤링 (Crawling)가 쓰이는 맥락

크롤링 (Crawling)는 나라장터(조달청 G2B) 전자입찰·공공조달 실무와 입찰 데이터 분석, 투찰가 예측에서 자주 등장하는 API·시스템 연계 영역 용어입니다. (용어 번호 47/100)

공고문·적격심사 세부기준·개찰결과·Open API 응답 중 어디에 나오는지 먼저 확인하면, 실무 판단과 데이터 컬럼 설계를 한 번에 맞출 수 있습니다.

실무에서 확인할 포인트

1. 출처 확인: 공고문·첨부 세부기준·나라장터 화면·공공데이터 API 중 어디서 값을 읽는지 구분합니다.
2. 계산·평가 연결: 크롤링 (Crawling)가 예정가격·사정율·낙찰하한가·적격심사 점수 중 어디에 영향을 주는지 메모합니다.
3. 증빙·유효기간: 서류·등급·실적처럼 유효기간이 있는 항목이면 입찰·계약 시점 기준으로 다시 검증합니다.
4. 예외 케이스: 공동수급 지분율, A값 유무, 업무구분(공사·용역·물품)에 따라 해석이 달라질 수 있습니다.

데이터·예측 관점

분석·모델링에서는 크롤링 (Crawling)는 보통 피처(입력 변수)·타겟(예측 대상)·필터 조건 중 하나로 쓰입니다.
정의를 모호하게 두면 같은 이름으로 다른 식을 쓰게 되어 사정율·투찰가 예측 오차가 커지므로, 팀 내 용어표를 이 정의에 맞춰 통일하는 것이 좋습니다.

함께 보면 좋은 용어

• 트랜잭션 — 투찰 제출 등 데이터 무결성이 보장되어야 하는 데이터베이스 연산의 논리적 단위.
• 인덱싱 (Indexing) — 누적된 대량의 개찰/입찰 데이터를 빠르게 검색하기 위한 DB 성능 최적화 기법.
• 벡터 DB (Vector DB) — 공고문 등 비정형 텍스트를 벡터화하여 유사 입찰 건을 검색할 때 활용하는 데이터베이스.

용어사전 전체 목록으로 돌아가기 · 투찰가 산정은 나라장터 투찰가 예측 가이드도 참고하세요.