본문 바로가기

날마다 반복되는 생활./아직 처리되지 않은 자료

에피소드 5 딥웹

개념의 시작

  • 이쪽 내용은 역사쪽으로 언급하기 힘들다. 범죄의 역사를 언제부터 시작되었다고 기록하는 사람은 없으니까. 또한 세상에 공개된것은 2010년이라고 하더라도, 얼마나 오랫동안 범죄로 운영되다가 공개(발견)되었는지 알 수 없기 때문이다. 일반적으로 사이버 범죄의 규모적 발전은 2006년쯤으로 보고 있고, 이런 숨겨진 웹은 2009년 쯤으로 보고 있다.

커먼 웹(Common Web) > 서피스 웹(Surface Web) > 딥 웹(Deep Web) > 차터 웹(Charter Web)

  • 보통 우리가 인터넷에서 누구든 찾아볼 수 있는 컨텐츠를 커먼 웹(Common Web)이라 부른다. - 우리가 네이버나 구글 이용할 때 보통 이 웹의 컨텐츠를 찾아본다.
  • 이 중 국가나 특정 기업이 컨텐츠를 통제하고 싶어하지만 검색 서비스가 통제하지 않는 웹을 서피스 웹(Surface Web)이라 부른다.
    • 대표적인 케이스가 한국이 검열해서 차단하는 워닝 사이트
    • 워닝 사이트의 종류 중에는 우니라나의 특성상 북한 관련된 사이트도 워닝에 포함되어 통제된다. 하지만 다른 나라에서 접근하는 것은 통제되지 않는다.
    • 포르노 또한 국가마다 규제 수준이 다르기 때문에
  • 전 세계에서 불법으로 통제하고 인류에 악영향을 끼치는 컨텐츠들이 있어 전세계 모든 국가에서 통제하는 컨텐츠가 모여있는 곳을 딥웹(Deep Web)이라 부른다.
    • 자살, 섹스 테이프, 실 서비스 해킹 정보, 고어, 스너프 등
    • 단순 컨텐츠로 구성된 경우, 
    • 이곳은 익명으로 접근 가능하지만 추적할 수 있다고 알려진 프록시로 접근 가능한 곳과, 추적하기 어렵다고 평가되는 토르 네트워크를 이용하여 접속한다.
    • 이 딥웹과 딥웹보다 더 깊이 들어가려면 토르 네트워크 같은 오버레이 네트워크를 이용해야 한다.
  • 딥웹 보다 더 깊은 웹으로 차터 웹(Charter Web)이라는 게 있는데, 일반적으로 딥웹의 범주로 분류한다. 이 차터 웹의 차터는 인류의 모든 법과 도덕을 무시하고 비호하는 영역이라고 보면 된다.
    • 컨텐츠를 거래하는 정보로 구성
    • 마약, 총기류 거래
    • Hardcandy - 12세에서 16세 미성년 소녀, 소아성애 관련 자료
    • 차단된 비디오, 영화, 책
    • Assassination Box - 청부 / 비청부 살인 살해 관련 자료
    • 희귀 동물, 알려지지 않은 마약관련 자료와 거래
    • 회사 거래, 자금 세탁, 페이퍼 컴패니 운영 등
    • 딥 웹에서 프록시가 아닌 토르와 같은 오버레이 네트워크로만 접근이 가능
  • 누구나 찾아갈 수 있는 맛집은 "커먼 웹"이고, 맛집이긴 하지만 맛집으로 잘 알려지지 않은 맛집을 "서피스 웹"이라 볼 수 있다.
  • 아주 극소수만 아는 자기네들 끼리만 공유하는 맛집을 "딥 웹"이라 할 수 있고,
  • 이 맛집에서 VIP를 따로 관리하여 아무나 방문하지 못하는 곳으로 "차터 웹"이라 할 수 있다.
  • 재미있는 것은 잘 알려진 맛집을 찾아 다니다가 우연찮게 잘 알려지지 않은 맛집을 찾을 수 있다.
  • 잘 알려지지 않은 맛집을 다니다보면 간혹 자기네들 끼리만 아는 맛집을 귀동냥 할 수 있으며
  • 자기네들 끼리만 아는 맛집에서 간혹 초대받아 아무나 방문하지 못하는 VIP 맛집에 방문할 수도 있다.
  • 이러한 흐름으로 해석하자면 일반적인 검색을 하다가 검색 스킬이 늘면 "서피스 웹"에서 놀 수 있고, "서피스 웹"에서 간혹 "딥 웹"의 자료들을 만나 볼 수 있다.
  • "딥 웹" 의 자료를 보다가 궁금해서 "딥 웹"에 접속해 다양한 정보를 검색하고 알아보는 과정에 간혹 "차터 웹"에 방문하거나 관련 자료를 만나볼 수 있다.

딥웹

  • 일반적인 검색엔진으로 검색 가능한 웹을 표면 웹(Surface Web)이라 하고, 검색엔진에 노출되지 않는 웹을 딥 웹(Deep Web)이라 부른다.
  • 마치 빙하의 일각이 표면상에 들어난 것이 검색엔진이 검색할 수 있는 영역이라면 바다속에 숨겨져 눈에 보이지 않는 부분을 딥 웹이라 부를 수 있다.
  • 딥 웹 또한 컨텐츠들이 모여잇는 곳으로 일반적인 검색엔진 서비스를 제공하는 회사에서 차단하거나 검열하는 자료 그리고 검색되지 않는 자료를 이곳에서 찾아볼 수 있다.
  • 딥 웹에 방문하려면 특정 네트워크나 특정 소프트웨어를 이용해야 한다. 딥 웹을 방문하기 위해 사용하는 네트워크를 오버레이 네트워크(Overlay Network)라 부른다. 
  • 대표적인 오버레이 네트워크로 토르 네트워크(Tor Network), I2P, FREENET 등이 있으며, 이들의 공통점은 익명성을 보장해주는 네트워크다.

Tor 네트워크

  • 요즘 익명성을 보장해주는 네트워크 중 가장 인기있는 방식이 아닌가 싶다. 그래서 랜섬웨어 유포자가 비트코인을 결제하는 모든 과정을 토르 네트워크를 이용한다.
  • 토르 네트워크의 핵심은 어니언 라우팅(Onion Routing)인데, 말 그대로 양파 까듯이 네트워크가 구성되어 있기 때문이다.
  • 어니언 라우팅은 1990년 미 해양 조사 실험연구소에서 만들었다가 1997년 미국방부(DARPA)에서 추가 개발했고, 지속적인 개발과 발전을 통해 2002년 토르 네트워크로 제작되었다.
  • 그리고 2004년 무료로 공개하고 현재는 EFF(전자 프런티어 재단) 프로젝트에서 이 소프트웨어의 운영에 재정적 지원을 하고 있다.
  • 처음 만들어진 목적 자체가 군대의 안전한 네트워크 통신을 위해 만들어졌다고 볼 수 있는데, 현재는 사용자들이 익명성을 보장받기 위해 사용하고 있다.
  • 항간에는 토르 네트워크가 익명성을 보장해준다고 하지만, 판을 짠 집단이 군대이기 때문에 충분히 감시 감독할 수 있는 숨겨진 요소가 있을 것이란 소문이 있다.
  • 동작 원리는 다음과 같다. 예를 들어 A-B-C-D 순으로 움직이는 네트워크가 있으며, D가 최종으로 A의 행동을 수행하는 노드라고 가정한다.
  • A와 B, B와 C 그리고 C와 D 사이에서만 암호가 해제되도록 구성된다. 여기서 암호는 AES 대칭키를 사용한다. 물론 이 전체는 https 통신을 한다.
  • A와 B 사이의 암호가 해제되면 B에서 C로 갈 수 있는 경로가 들어나고, B와 C 사이에서 암호가 해제되면 C에서 D로 갈 수 있는경로가 들어난다.
  • 결국 D는 양파 심이되고 그 주변을 감싸하는게 C, B, A가 되기에 어니언 라우팅이라 한다.
  • 이렇게 구성되어 있기에 누가 웹 서비스에 접속했는지, 누가 인터넷 통신을 했는지 추적하기 어려워 익명성을 보장해준다.

다크 넷

  • 딥 웹은 범죄, 일탈의 유무가 아닌 일반적인 인터넷에서 검색되지 않는 정보가 정의다. 이 중 어둠처럼 은밀하고 음탕하며 악의 기운이 가득한 곳을 다크넷(Darknet)이라 부른다.
  • 다크넷의 핵심은 네트워크다. 웹 페이지 웹 사이트 뿐만 아니라 FTP 서비스나 메일 서비스 등 수 많은 네트워크 서비스를 의미한다.

다크 웹

  • 다크 넷에서 웹 쪽만 표현하는 방법인데, 대부분의 자료나 사용자 편의에 의해 쉽게 만나볼 수 있는 자료는 웹이 가장 많기에 별도로 수식되는 말이다.
  • 다크 넷을 이용하는 사용자가 컴퓨터 기술을 전문으로 하는 사람도 있겠지만 아닌 사람들도 있다. 그런경우 쉽게 접속하고 쉽게 컨텐츠를 공유하고 커뮤니티를 활성화 하려면 웹이 가장 좋다.
  • 토르 네트워크를 설치하고 설정할 필요 없이 토르 브라우저라는 소프트웨어를 설치하면 쉽게 딥웹에 방문할 수 있고, 이 중 범죄에 가담하게 되면 다크 웹에서 활동하게 된다고 보면 된다.
  • 딥 웹은 불법이 핵심 주체가 아닌 익명성을 보장하는 것인데, 충격적이게도 익명성을 보장하니 불법적 요소가 크게 대두되어 다크 넷, 다크 웹이라는 것이 생겨난 것을 볼 수 있다.
  • 2015년 다크 웹 컨텐츠의 통계자료를 보면 마약은 15%, 불법 거래는 9%, 사기 9%, 해킹 4.25%, 포르노 2.75%, 총기 거래 1.4%, 도박 0.4% 정도로 보여진다고 한다.

실제 사례

  • Hidden Wiki - 딥, 차터 웹의 위키피디아 버전으로 불법과 관련됨 모든 컨텐츠들이 쌓이는 곳
  • 실크로드 - 온라인 마켓으로 비트코인이 대두되기 전에 물물교환을 주류를 이루었다. 주로 총기, 마약, 의약품 등 거래했으나 이 사이트 운영자는 검거되었다고 한다. 지금 딥웹에서 볼 수 잇는 모든 실크로드 사이트는 이 사이트의 영향으로 만들어진 아류 사이트들이다.
  • 베리 마켓 - 2016년 10월에 검거된 내용이 인터넷이 공개되었다. 이 마켓은 한국어 서비스하는 물품 거래 사이트로 주로 마약을 거래했다고 한다. 거래는 주로 비트코인을 이용했다.  거래에 참여한 사용자 80여명이 체포되었고, 해외로 도주한 마약판매상 일당을 쫓는 중이다. 현재는 폐쇄되었다.


'날마다 반복되는 생활. > 아직 처리되지 않은 자료' 카테고리의 다른 글

에피소드 5 딥웹  (0) 2017.08.18
에피소드 2 와이파이  (0) 2017.08.18
무제 #151211  (0) 2015.12.11
무제 #151211  (0) 2015.12.11
기록 - 자바스크립트 공부  (0) 2015.09.03
기록 - 웹 취약점 진단  (0) 2014.11.26

티스토리 툴바