논문
웹 사이트
방법
: "다크웹 크롤러는 토르(Tor)로 어니언(.onion) 사이트에 접근한 다음 다크웹의 데이터와 피드를 가져온다"
-> 기사 ( https://zdnet.co.kr/view/?no=20180119163901&re=R_20190902135822)
https://zdnet.co.kr/view/?no=20190902135822
-> 간편하고 속도가 빠른 기능적으로 우수한 다크웹 크롤러를 만들면 됨..?
-> 이미 다크웹 크롤러는 존재. ( **https://github.com/intadd/Darkup) , (https://github.com/dirtyfilthy/freshonions-torscraper)**
하지만, 해당 웹 소스 참고하여 새로운 형태의 크롤러를 개발해보자.
존재하는 크롤러 조사 및 실행해보기
새로운 형태의 크롤러 및 검색엔진 개발
다크웹 뿐만 아니라 일반 인터넷 상에서 다크웹으로의 접속을 유도, 소개하는 사이트는 별도로 크롤링
(악의적인 목적의 사이트는 별도 카테고리로 분류)
국내 검색 키워드 : 다크웹, 다크넷, 킬로스 검색 엔진, 킬로스
경찰청은 마약 거래 등 다크웹을 통해 벌어지는 범죄에 대응하기 위해 12월까지 ‘다크넷 불법정보 수집·추적 시스템’을 도입할 계획이다. 수천 개가 넘는 불법 사이트를 망라하는 ‘다크웹 지도’를 그리고 그 안에서 주고받는 범죄 관련 정보를 자동으로 수집해 기록해두는 시스템이다. 이 시스템이 도입돼도 다크웹 접속자의 인터넷주소(IP주소)를 곧바로 추적하는 건 어렵다. 다만 축적된 데이터를 형사사법정보시스템(KICS) 등과 연동해 분석하면 마약상 등 범죄자를 특정할 만한 패턴을 추출할 수 있을 것으로 기대된다. (https://www.donga.com/news/Society/article/all/20191031/98148617/1)