'이호성님'에 해당되는 글 1건

  1. 2008/10/22 세상의 모든 동영상을 보는 사나이, Enswer.me 개발자 이호성님 (12)
2008/10/22 15:57

세상의 모든 동영상을 보는 사나이, Enswer.me 개발자 이호성님

안녕하세요! 동영상 검색 Enswer.me꼬날입니다.  *^^*
오늘은 이전 포스트에서 예고한대로 Enswer.me의 개발자 한 분을 소개할까 합니다.

주인공은 짜잔~


바로 이분, 이호성님입니다.  꼬날과 사무실에서 무려 1m나 떨어져 있는 관계로 어제밤 이메일 인터뷰를 급 진행했습니다. 같이 보실까요?  Let's go~!

안녕하세요 호성님, 먼저 하시는 일에 대해 간략하게 소개해 주세요.


네~ 안녕하세요, 이호성입니다. 제가 하고 있는 일은 크롤링이라고 불리는 일입니다. 전세계에 있는 동영상과 그에 대한 정보를 모아 오는 일입니다. 동영상 검색의 시작이라고 할 수 있겠죠?  현재 한국,미국,중국,일본,네델란드,대만,독일 등의 70여 개 사이트에서 동영상을 수집하고 있습니다. 크롤링 작업 이외에도 요즘에는 같은 동영상들을 찾아 재구성하는 클러스터링 작업에도 품앗이를 하고 있습니다.

크롤링과 클러스터링 이외에도 제가 하고 있는 중요한 일들이 많은데요. 점심 메뉴 정하기, 간식 사서 냉장고 채워 넣기(그리고 꺼내먹기), 회식 조르기 등도 열심히 하고 있습니다.

확대


아~ Enswer.me 에 슈퍼마켓처럼 언제나 먹을 것이 풍성한 이유가 있었군요? 앞으로도 열심히 달려주시길 바랍니다.  :-)   By the way, 개발자로서 동영상 검색이 갖고 있는 매력이 있다면 어떤점이 있을까요?


동영상 검색이라는 것이 새롭게 시작되고 있는 분야인만큼 누구도 답을 내지 못한 문제에 도전하고 있다는 점에서 큰 매력을 느끼고 있습니다. 한국, 중국, 미국 에서 올라온 동영상들이 함께 클러스터링 되면서 검색을 통해서 찾아질때 '아.. 내가 전세계의 동영상을 모아가고 있구나' 라는 생각이 듭니다. 간혹 동영상들이 처리되고 있는 화면을 넋 놓고 바라보고 있기도 합니다.

게다가 음란물 필터링이라는 핑계로 야한 동영상을 회사에서 맘놓고 볼 수 있다는 것.... 도 있죠.


풉.. 항상 답변의 마지막 부분이 핵심인걸요?  센스쟁이!
Enswer.me 가 하루에 100만 건의 동영상을 처리한다는 이야기를 들었는데요. '100만 건을 처리한다'라 함은 구체적으로 어떤 작업들이 이루어진다는 걸 의미하는 건가요?

동영상 처리 과정에 대해서 설명을 드려야 하겠네요.  특정 사이트에 새로운 동영상이 추가되면 주기적으로 해당 사이트에 방문하는 웹로봇이 그 동영상 정보를 가져오게 됩니다. 잠시 후 그 동영상을 직접 다운로드하고 분석합니다. 여기까지가 바로 크롤링 과정입니다. 그 다음으로는 엔써즈가 보유한 신호 처리 기술에 의해 동영상을 분석해서 이미 가지고 있는 동영상과 겹치는 부분이 있는지를 계산합니다. 겹치는 부분이 있을 경우 그 동영상들과 함께 보관하게 됩니다. 이 과정이 클러스터링입니다.  클러스터링 후에는 사용자가 검색했을 때 해당 동영상을 빠르게 보여주기 위해 선작업을 해두게 됩니다. 이것이 인덱싱입니다. 

이런 모든 과정을 하루에 100만 번 반복한다고 생각하시면 됩니다.


와우~ 불현듯 에너자이저 백만돌이 CF 가 머리 속을 스치고 지나가는군요. 백만 스물하나, 백만 스물둘..
하루 100만 건의 동영상 .. 얼른 상상이 되지 않는데요. 이 100만 건의 동영상을 수치로 풀어 설명하신다면?

100만건의 동영상은 약 15TB 에 해당하는 양입니다. 1테라바이트는 1,000 기가바이트입니다. 1 기가 바이트는 1,024 메가바이트이죠. 좀 상상이 되시나요?

이것을 시간으로 계산해 보면 280,000시간 정도가 됩니다. 여전히 상상이 잘 안되시죠? 1분 단위로 계산을 해보겠습니다. 1분에 10GB, 200시간 정도의 동영상을 다운로드해서 분석한다고 보시면 됩니다. 참고로, 이 숫자들을 이용해 전세계 동영상들의 평균을 내볼 수도 있습니다.  1개의 동영상은 평균  15MB의 크기에 16분 정도의 재생시간이 걸립니다. 여기까지 호성이의 재미있는 동영상 세계 시간이었습니다. ㅎㅎㅎ  ^^d


그야말로 전세계 동영상을 손바닥 위에 놓고 계실텐데요. 개인적으로 가장 마음에 드는 동영상 사이트와 그 이유를 말한다면?

중국의 youku입니다. 단순히 개발자 입장에서 질 높은 동영상이 많이 올라와서 좋아합니다.  일본의 니코비디오도 좋아합니다. 로그인을 해야지만 동영상을 볼 수 있다는 점이 마음에 안 들긴 하지만, 전체적으로 귀여운 UI가 좋습니다. 코멘트들이 슝슝 날아다니는 것도 매우 재미있습니다.


코멘트가 슝슝~ 아, 그것 참 재미있겠는데요?  ㅎㅎ
엔써즈는 이제 막 시작하는 벤처 회사인데요. 엔써즈에 입사하게 된 동기가 있다면?  그리고 스타트업에서 일하는 것에 대한 생각을 듣고 싶습니다.

면접을 볼 때  데모로 보았던  enswer.me 의 초기 모습과 회의실 한쪽에 빼곡히 적혀있는 올해의 목표가 인상적이였습니다만, 솔직히 엔써즈에 대한 부푼 꿈이 있었다거나 '바로 이 회사다!' 하는 확신은 없었습니다.  하지만 '지금 제가 엔써즈라는 벤처회사에 입사한것에 대해서는 행운이였다!' 라고 말하고 싶습니다. 회사에서는 믿음을 가지고 제가 하는 일을 밀어주고 저도 제가 하는 일에 대해 자부심을 가지고 있습니다. 인정받으면서 즐겁게 일한다는것 그것이 개발자의 전부가 아닐까요?  덧붙여, 한달 한달 지날때 마다 제가 맡지 않은 다른 부분에서 회사가 부쩍 부쩍 성장하고 있는 것을 느낄 때 역시 이게 벤처에서 일하는 재미구나 라는 것을 느낍니다. 

마지막으로 엔써즈는 칼퇴근을 합니다. :)


오호~ 칼퇴근이라! 확 당기는 말씀이군요.  *^^*
마지막으로 가까운 미래의 꿈이 있다면?

엔써즈에서 인생에 새길만한 경험을 하는 것과 먼 미래의 꿈을 찾는 것 입니다.  그리고 힘들겠지만 훈남도 되고 싶습니다. ^^


네, 호성님! 성실한 인터뷰 답변에 감사드립니다. 그리고 모르시는 것 같은데요~  호성님은 이미 훈남입니다. 일 잘하지 성실하지 친절하지..  게다가 언제나 도와줄 일 없냐고 물어봐 주는 좋은 동료니까요~ 

지금까지 동영상 검색 Enswer.me 의 크롤링을 담당하고 있는 이호성님 인터뷰였습니다. 이호성님에게 궁금하신 점이 있으신 분은 댓글 달아 주세요. 다음번 인터뷰도 기대해 주시고요~  



Trackback 0 Comment 12

Trackback : http://blog.enswer.net/trackback/61 관련글 쓰기

  1. BlogIcon 젊은영 2008/10/22 16:17 address edit & del reply

    하루에 엄청난 양의동영상을 크롤링을 하고 있군요.
    몇 대의 서버에서 운영하시는지 무척 궁금합니다.

    • 리크 2008/10/22 23:44 address edit & del

      젊은영님. 관심 가져 주셔서 감사합니다. 현재 크롤링으로 사용하고 있는 서버는 40여대 정도 입니다. 집에서 놀고 있는 제 컴퓨터도 열심히 크롤링을 하고 있습니다. ㅋㅋ

  2. BlogIcon gofeel 2008/10/22 18:05 address edit & del reply

    앗 당연히 동영상 인터뷰가 아닌건가요-_-!

    • BlogIcon enswer 2008/10/22 23:22 address edit & del

      ㅎㅎㅎ gofeel님 .. 유머쟁이~ :-)

  3. BlogIcon BKLove 2008/10/22 19:01 address edit & del reply

    인터뷰 잘보고 갑니다 ^^
    그런데 youku는 한국에서 안보이군요.
    왜 원더걸스 영상( http://v.youku.com/v_show/id_XNDYzMzI0MDA=.html )을 한국에서 못보는건지 ㅡㅡ;;

    • 리크 2008/10/22 23:43 address edit & del

      인터뷰를 하고 나니 youku 싸이트가 한국에서 막힌것 같더군요. 좋아하는 싸이트에서 youku 취소하려고 합니다. ㅠ.ㅠ

  4. 정은 2008/10/22 23:42 address edit & del reply

    이호성씨는 회사에서 야한 동영상을 맘놓고 보고 있었군요! 새로운 정보 감사합니다 ^-_-^
    - 스누피 사진을 찍어준 人 -

    • 리크 2008/10/22 23:44 address edit & del

      정은님. 여기에서 이러시면 곤란합니다. :)

    • BlogIcon enswer 2008/10/22 23:49 address edit & del

      정은님 반갑습니다. :-)

  5. 2008/10/23 14:56 address edit & del reply

    비밀댓글 입니다

  6. BlogIcon 고이고이 2008/10/23 23:17 address edit & del reply

    호성씨에게 정중히 공유요청합니다;;

    • 리크 2008/10/25 04:42 address edit & del

      고이고이님, 이런글은 비밀글로 남겨 주세요 :)
      (그날 뒷이야기도 좀 들어야 하는데...)