Hacker News보안

어두운 웹 위협 정보 수집 자동화하는 오픈소스 VoidAccess 공개

원제 Show HN: VoidAccess – open-source dark web OSINT, from query to a graph

104 포인트댓글 13
Key Point

다크웹 위협 정보 수집을 자동화하는 엔터프라이즈급 오픈소스 도구로, 규모 있는 보안팀이 수작업으로 하던 조사를 체계화할 수 있기 때문이다.

핵심 요약

  • VoidAccess는 다크웹 조사 쿼리를 구조화된 위협 정보로 변환하는 자체 호스팅 가능한 오픈소스 OSINT 도구다.
  • 16개 이상 Tor 검색 엔진, 붙여넣기 사이트, 코드 저장소, 보안 피드에서 병렬로 데이터를 수집한다.
  • 정규식, 명명된 개체 인식(NER), 선택적 LLM을 이용해 IOC, 지갑, 자격증명, 취약점, 악성코드, 행위자 등을 추출한다.
  • AlienVault OTX, abuse.ch, Shodan, VirusTotal, Have I Been Pwned 등 30개 이상 외부 위협 정보 소스로 보강한다.
  • 추출된 개체를 역사 데이터베이스와 대조하고 관계, 커뮤니티, 인프라 클러스터를 그래프로 구축한다.
  • STIX 2.1, MISP, Sigma, YARA, Snort, Suricata, CSV, JSON 등 다양한 형식으로 내보낼 수 있다.
  • CLI 또는 웹 UI로 SQLite(로컬) 또는 PostgreSQL+Docker Compose 스택으로 실행 가능하다.
  • OpenRouter, Groq, OpenAI, Anthropic, Google, Ollama 등 다양한 LLM 공급자를 지원한다.
  • MIT 라이선스이며 권한 있는 보안 연구 및 위협 정보 업무에만 사용하도록 사용 정책을 명시했다.
  • 12단계 파이프라인으로 쿼리 정제, 수집, 필터링, 보강, 재귀적 링크 발견, 캐시 재사용, 페이지 수집, 개체 추출, 교차 참조를 순차 진행한다.
  • 암호화폐 주소, 네트워크 지표, 파일 해시, API 키, Telegram/Discord 계정, CVE, YARA 규칙 등 13개 범주의 개체를 인식한다.
  • API 키가 없는 소스는 자동으로 건너뛰며, 선택적 PyTorch 의존성 없이도 SHA-256 폴백 임베딩으로 실행된다.
AI 요약 안내

AI가 한국어로 정리한 내용입니다. 정확한 정보는 원문을 확인해 주세요.

요약 원칙 ↗