본문 바로가기

전체 글74

맵/리듀스 (Map/Reduce) 이해하기 빅데이터를 접하기 시작하면서 자주듣게 되는 용어가 있습니다. 맵/리듀스 라는 용어인데요, MR이라고도 많이 쓰구요, 빅데이터 처리에는 늘 맵리듀스 개념이 들어가죠. 그럼, 빅데이터 처리의 기본이되는 맵리듀스란 무엇인지 자세히 알아볼께요. 일단 맵(Map) 이라는 것은 지도? 아니구요, :) 데이터를 담아두는 자료 구조 중의 하나입니다. 맵은 키와 밸류라는 두개의 값을 쌍으로 가지고 있는 형태입니다. 수학시간에 좌표를 표시할때 순서쌍이라고 하죠, (x,y) 이렇게 하던 바로 그 개념입니다. 여기서 x가 키이고, y가 밸류 즉 값인거죠. 그리고 함수 f(x) => y 도 생각나시죠? x를 알면 y를 알 수 있는 구조로 관리 됩니다. 리듀스(Reduce)는 이 맵을 정리해 나가는(줄여나가는) 방법이라고 할 수.. 2015. 3. 6.
빅데이터란 무엇인가? 정말 오랜만에 글을 씁니다. 제가 이 블로그를 돌보지 않는 동안에도 방문자가 꾸준이 늘었더라구요. 무언가 검색해서 제 글을 읽어주신 모든 분들께 정말 감사드립니다. 그리고, 조금이나마 도움이 되었다면 좋겠다는 맘이 굴뚝같네요. 그런데, 단 한 분 정도만 글을 남겨주셔서 느낌이 어떠셨는지 알 수가 없다는 아쉬움이....쿨럭.........:-)------------------------------------------------------------------------------------------------------ 요사이는 빅데이터 관련 일을 하고 있습니다. 개인적으로 또 한번의 새로운 도전이죠. 왜그렇게 힘들게 사냐는 친구들도 물론 있지만, :) 그래도 맘이 끌리는대로 움직여 봅니다. 빅데이터!.. 2015. 2. 21.
[Quilt6] 퀼트 컵받침 만들기 부엌수건을 두개 만들면서 자투리 천 사용에 맛을 들였어요. 쓸모없는 자투리 천을 필요한 물건으로 탈바꿈 시킨다는 기쁨이 크더라구요. 게다가, 자그마한 생활용품을 만드는 것은 힘든 단계 없이 금방 만들 수 있어서 바느질이 진정한 힐링의 시간이 되네요. 그래서 이번엔 컵받침을 만들어 보기로 했어요. 사실 아기자기한 소품을 좋아하진 않아요. 심플하게 사는 편이거든요. 그런데 여름이라 음료수에 얼음띄워서 옆에놓고 책을 보거나 컴퓨터를 할 때가 종종 있는데 컵에 맺힌 물이 책상에 남아서 안좋더라구요. 이래서 컵받침을 쓰나보다 싶어서 한번 만들어 봤습니다. 커피잔을 올려놓고 한번 찍어봤습니다. 금방 두 개 만들었어요. TV 보면서 해도 한시간이면 하나 뚝딱 만드네요. 하나는 6센치 크기로 재단한 조각천 네조각으로 .. 2014. 8. 8.
[Quilt5] 퀼트 부엌수건 만들기 집에 물건이 쌓이는 것을 싫어해서, 필요한 만큼의 재료가 들어있는 퀼트 패키지를 주로 작업하지만, 그래도 집에는 조각천들이 하나 둘 늘어갑니다. 게다가 정말로 남은 자투리 천들이다보니 서로 어울리는 것들이 거의 없고, 크기도 참 작죠. 이걸 바라보며 생각해봤습니다. 이걸로 뭘 만들 수 있을까 하구요. 마침 부엌수건이 오래돼서 새로 몇 개 더 사려다가, 아차 이걸 만들면 되겠다 싶어 쓰던 수건을 반 자르고, 있는 천을 꺼내 바느질을 시작했습니다. 이렇게 반달 모양으로 자른천과 솜을 놓고 2센치 간격으로 퀼팅 해 줍니다. 아들 파자마 만들어주고 남은 천이라 야구 무늬네요. 천이 어두운 검은색이라 나름 경쾌하게 보이라고 밝은 하늘색 실을 사용해 퀼팅 했네요. 이제 또 한장을 똑같이 재단해서 겉면끼리 마주보게 .. 2014. 8. 6.

티스토리툴바