티스토리

헤링의 일상
검색하기

블로그 홈

헤링의 일상

paulsmooth.tistory.com/m

echo `tech` >> ( https://pskim-b.github.io )

구독자
4
방명록 방문하기
공지 알리는 글 모두보기

주요 글 목록

  • 2023.11.14 - 부동산 주요 지표 한국부동산원 https://www.reb.or.kr/r-one/cm/cntnts/cntntsView.do?mi=10116&cntntsId=1407 KB부동산 https://data.kbland.kr/kbstats/wmh?tIdx=HT11&tsIdx=hai 주택구매력지수(HAI) = (중위가구소득 ÷ 대출 상환 가능 소득) ×100 HAI가 100보다 클수록 큰 무리 없이 주택을 구입할 수 있다는 것을 나타내며, HAI가 상승하면 중위가구의 주택 구매력이 증가한다는 것을 의미합니다. 낙찰가율(매각가율) = (매각가/감정가)*100 낙찰가율은 매각가율과 같은 뜻이며 법원 경매 통계자료에서는 매각가율이라는 단어를 사용하고 있다. 부동산 시장 전망의 대표적인 선행지표. 낙찰가율이 100%를 넘어서면 미래의 부동.. 공감수 0 댓글수 2 2023. 11. 14.
  • [HADOOP] HDFS 아카이브 (HAR) 개요 Hadoop에서는 과거 버전부터 Hadoop Archive(이하 HAR) 기능을 제공한다. 이는 우리가 일반적으로 사용하는 파일의 압축과 비슷한 개념인데, 우리가 일반적으로 파일시스템에서 압축(archive)를 하는 이유는 (1)여러개의 파일을 하나의 묶음으로 관리하기 위해서나, (2)다양한 압축 방법을 통해 파일의 용량을 줄이기 위함이다. 그러나 HDFS에서 아카이브는 HDFS 상에 있는 다수의 파일을 더 적은 수의 파일로 관리하기 위한 목적이다. 이는 HDFS의 구조적인 한계에서부터 비롯된 것인데, HDFS 상에서 관리될 수 있는 최대 파일의 개수가 약 3억 5천만개이기 때문이다. 따라서 HDFS 상에서 파일의 개수를 줄일 수 있는 방법이 고안되어야 했고 이것이 바로 HAR이다. 사용법 압축 h.. 공감수 1 댓글수 0 2021. 1. 19.
  • [책리뷰]1등의 습관, 일로 부터 나를 지키기 위한 방법 집 앞에 집 앞에 상권이 살아나면서 대형 중고서점이 들어섰다. 코로나가 심해지기 전에는 그곳에서 노트북을 펴 놓고 책을 읽기도 하였는데 사회적 거리두기로 인해 노트북과 책을 기대 놓았던 책상은 여러가지 굿즈를 펼쳐 놓는 진열대로 변신했다. 코로나로 인한 우울증에 더해 2020년은 내겐 고난의 연속이었다. 가까스로 사용한 연차를 활용해 답답한 마음을 달래기 위해 중고서점 한 구석에 앉아 책을 읽기 시작했다. 이틀간의 기웃거림 끝에 "1등의 습관" 이라는 노란 책을 집어 들었다. 서점의 스테디 셀러로 분류된 진열대에 놓여 있던 노란 책인데, 개인적인 생각으로는 책 제목이 꽤나 재수없는 반열에 올라있기 있었기 때문에 몇번이고 지나쳤던 책이었다. 이러한 책에 대한 편견이 나쁘다는 것을 다시 한번 깨달았지만, 그.. 공감수 2 댓글수 0 2021. 1. 10.
  • [NiFi] FlowFile 이란? - 어떻게 memory/disk 에서 처리되는가? FlowFile은 NiFi에서 처리되는 기본적인 단위이다. FlowFile은 처리하고자 하는 데이터와 그 데이터를 처리할 때 필요한 속성 값을 가리키고 있다. FlowFile은 실제 데이이것은 데이터와 속성 값을 가지고 있으며, NiFi Processor에서 데이터 처리를 위해서 사용한다. Processor 에서 생성/수정하는 FlowFile들은 Processor가 어떻게 FlowFile을 처리하냐에 따라서 properties와 event에 대한 정보가 달라진다. 또한 FlowFile의 처리를 위해 반드시 필요한 property 값들도 있기 때문에 flow를 구성할 때 서로 호환되는 process간에 연결을 하거나, 각 processor에 맞는 값들을 맞춰주기 위한 작업을 별도로 수행해야 한다. Flow.. 공감수 4 댓글수 3 2020. 10. 11.
  • [NiFi] NiFi는 어떻게 데이터를 저장하나? (NiFi Repository) nifi.apache.org/docs/nifi-docs/html/nifi-in-depth.html#repositories Apache NiFi In Depth Utilizing the copy-on-write, pass-by-reference, and immutability concepts in conjunction with the three repositories, NiFi is a fast, efficient, and robust enterprise dataflow platform. This document has covered specific implementations of pluggable interf nifi.apache.org NiFi에는 3가지 저장소Repository가 존재한다. 각각의 .. 공감수 6 댓글수 1 2020. 10. 7.
  • [Ozone]Apache Ozone 벤치마킹 자료 (by cloudera) Apache ozone 벤치마킹 자료 (by cloudera) 다양한 산업군의 기업들이 데이터 분석을 통한 높은 수준의 비즈니스 서비스를 제공하기 위해 가지고 있는 모든 데이터를 하나의 저장소에 모으려는 노력을 하고 있다. (+ 물론 아직까지 남들이 하니까 일단 모으고 보자는 곳들도 존재한다 ~ ___ ~) 일반적으로 주위에서 데이터의 양과 일상적으로 처리해야 할 데이터가 많지 않은 기업들은 CSP의 서비스를 사용하고 있으며, 데이터가 많으며 지속적인 처리작업이 이루어지거나 개인정보 및 국가에서 관리하는 기술 민감정보를 가지고 있는 기업들은 on-premise에 자체적인 data lake를 구축하는 추세이다. 이때 쉽게 그리고 싸게 생각할 수 있는 것이 범용장비 여러대로 구성할 수 있는 하둡 기반의 Da.. 공감수 1 댓글수 0 2020. 4. 26.
  • [PAINT IN ROCK] 3. 또 다른 저항의 음악 Folk (feat. 60년대 미국의 분위기) 잠깐 Rock 에서 한 발자국 떨어져 보자. 노래를 반복해서 많이 듣는 것 보다 그 시대 배경을 아는 것이 왜 그들이 그렇게 생각했는지.. 왜 그들이 이런 음악을 만들고 공감했는지 이해할 수 있게 해줄 것이다. - 60년대 미국 사회는 미국 내외를 가리지 않고 많은 분노와 개혁의 운동이 벌어졌던 시기이다. 냉전, 베트남전쟁, 그리고 흑인과 여성의 인권문제, 정치권의 부패는 사회 내부의 갈등을 크게 고조시켰으며, 청년들은 저항의 대변가로써 운동에 앞섰다. 기존의 기성세대들과 그들의 체제의 반항을 노래하던 록은 이미 여러 아티스트들에 의해서 연주되었으며, 이는 빌 헤일리, 엘비스 프레슬리와 같은 아티스트들을 통해 미국 내 뿐만 아닌 영국에서도 큰 인기를 얻기 시작했다. 이와 함께 평화와 자유를 노래하는 곳에.. 공감수 0 댓글수 0 2019. 12. 16.
  • [PAINT IN ROCK] 2. 초기 Rockin'Roll 시대의 제왕 Elvis Presley 이제 본격적으로 Rockin'Roll의 시대가 시작된다. 우리가 익숙한 음악이 갑자기 나와서 반가울 수도 있다. 책의 일부분만 다루었음으로 더 자세한 부분은 'PAINT IN ROCK' 본문의 익살스러운 그림과 함께 보는 것을 추천한다. ------ - 흑인의 음악을 따라하는 백인들의 음악이 대중들의 관심과 사랑을 받게되자, 미국의 제작자들은 흑인과 같은 목소리를 내는 백인을 찾기 시작한다. 그러던 중 극장안내원과 트럭운전을 하며 돈을 벌던 노래를 곧잘 부르던 청년 Elvis는 어머니를 위한 노래 That's alright(mama) 라는 곡을 녹음하게 되는데, 이것을 계기로 본격적으로 활동하기 시작한다. https://www.youtube.com/watch?v=NmopYuF4BzY (Elvis Aron.. 공감수 0 댓글수 0 2019. 12. 8.
  • [PAINT IN ROCK] 1. Rock&Roll의 시작 책의 내용을 일부 발췌하고 사족을 달다보니 남무성 작가님의 의도/내용 전달과 약간 달라지는 부분이 있을 수 있습니다. 가장 좋은 것은 같이 책을 읽는 분들이 함께 글들을 봐주는 것이고, 만약 이 글만을 보시는 분들이라면 감안 하셔서 봐주셨으면 감사하겠습니다. ------ - 재즈의 시작과 마찬가지로 Rock&Roll의 시작 또한 요이 땅! 하며 시작된 것은 아니다. Rock과 Roll이란 단어는 기본적인 영어 단어이면서 음악에서 다양한 의미로 사용되었다. Rock은 흔들리다, 춤추다와 같은 의미로 사용되었으며 Roll은 휘감다와 같은 의미로 사용되었다. 그리고 이 둘은 JAZZ의 어원과 마찬가지로 성관계를 나타내는 육감적이고 자극적인 의미로도 쓰였던것 같다. - 2차 세계 대전이 끝나고 승전국의 풍요속에.. 공감수 0 댓글수 0 2019. 12. 5.
  • [PAINT IN ROCK] 0.남무성의 만화로 보는 록의 역사 - 최근에 들어 음악을 듣는 폭이 더 넓어졌다. 그래도 꽤 여러 사람들과 만나왔다고 생각했던 나인데 여기 저기서 만나는 사람들과 음악 취향을 나누다 보니 더 열린 마음으로 음악을 접하게 되는 것 같다. 그러던 중 아끼는 사람으로부터 PAINT IN ROCK 을 잠시 빌려주겠다는 제의(?)를 받았고 나는 흔쾌히 수락했다. JAZZ IT UP을 어렸을 때부터 사 모으던 보았던 남무성님의 팬으로써 상당히 기대가 되었다. 가끔 ROCK과 비틀즈를 듣지만 그들을 잘 알지는 못하고 어떻게 보면 제대로 듣지도 못하고 있다. 책을 접하고 한장 두장 넘겨가며 읽다가 책에 나오는 주요 음악들을 유툽에서 찾아 듣다보니 그 시대의 아티스트들과 같이 호흡하는 것 같았다. 하지만 단점으로 너무 진도가 안나가고.. 뒤의 내용을 보.. 공감수 0 댓글수 0 2019. 12. 5.
  • 2019, Seoul Google Cloud Summit 참관 후기 > Google Cloud Summit 2019 를 다녀왔다. 작년에 이어 올해 서울에서 두번째로 진행이 되었다고 하는데, 사실상 올해부터 무료 온라인 교육, 오프라인 세미나 등 공격적으로 마켓팅을 하고 있다. 이미 AWS가 시장을 선도하고 있는 가운데, Google이라는 공룡이 새로이 시장에 뛰어듬으로써 AWS - MS - Google 의 치열한 경쟁이 펼쳐질 것으로 생각된다. TechRepublic (https://www.techrepublic.com/article/public-cloud-market-share-numbers-keep-missing-the-point/)을 참조해 보면 2018년 기준 AWS(47.8%), MS(15.5%), Google(4.0%) 의 시장 점유율을 보이고 있는데 이는 .. 공감수 0 댓글수 0 2019. 11. 6.
  • 20190930 - 색소폰 소리/호흡이 막히는 경우 요즘 들어 기존과 같은 악기 셋팅, 마우스피스(반도린 v16 m7) + 리드(자바 그린 2호반), 을 사용하는데 예전과는 다르게 악기를 불 때 숨이 막히는 느낌이 든다. 기존에는 숨이 피스 안으로 빨려 들어가는 느낌이 들었다면 요즘에는 그냥 피스 안에서 무언가가 숨을 턱 하고 가로막는 느낌이다. 원인이 무엇일까? 궁금해 하다가 선생님께 여쭤봐서 아래와 같은 답변을 들었다. 물론 개인별로 모두 원인/해결책이 다를 수 있지만 내 경우를 참고하면 도움이 될 수도 있을 것이다. ** 색소폰 불 때 숨이 막히는 이유 1) 꾸준한 연습으로 호흡이 쎄져서 - 계속해서 악기를 불다보면, 숨을 내보내는 힘이 예전보다 커질 수도 있다. 이런 경우 마우스피스를 한 호수 더 높여야 하는데 (ex. 반도린 v16 m7 -> 반.. 공감수 0 댓글수 0 2019. 10. 5.
  • 20190916 -???? - 팬타토닉 스케일 123 56 , 메이져 마이너 동일 팬타토닉 스케일을 넣을 때는 몇 개의 음을 넣느냐가 중요한 것이 아니라 각 음의 박자를 어떻게 나누느냐가 중요르다. 음을 여러개 넣는다고 해서 좋지 않다. 박자를 어떻게 할 것이냐가 중요. - 너무 음을 밀지 말자. 1박 이상 밀리면 늦은 것 - 꾸밈음의 느낌따라 빠르기와 세기도 다르게 - 전체적으로 음의 세기를 연속적으로 변화시키자. 갑자기 커진다거나 작아지는 것을 경계하자 - 저음 불때는 울림이 강하기 때문에 음 끝에 음을 놓게 되면 티가 많이 난다. 따라서 쉼표가 있다고 하더라도 호흡이 가능한 선에서 음을 약하게 유지하는게 듣기 좋다 - 스케일은 계속 연습하자 - 호흡을 조금 너 약하게 편안하게 악기 너무 들지 말고 공감수 0 댓글수 0 2019. 9. 17.
  • [GCP] 3 - Kubernetes Architecture (2) : Controllers 이전 글에서는 kubernetes 기본적인 아키텍쳐와 Google Kubernetes Engine에서 제공하는 관리 기능들을 살펴보았다. 이번글에서는 조금 더 자세하게 k8s object 의 동작과 관리방법에 대해서 정리했다. > 이전 글에서 봤던것 처럼, 3개의 nginx 웹 서버를 동시해 실행시켜야 하는 경우를 생각해보자. 가장 간단한 방법은 3개의 pod object를 선언하고 단순하게 그것의 desired states를 각각 선언하는 것이다. Pod의 desired state에 따라서 각 pod는 반드시 생성이 될 것이고, 내부적으로 nginx container이미지가 수행되어 사용될 것이다. > K8s는 manifest파일들을 통해서 이러한 pod object를 생성하고 관리할 것이다. mani.. 공감수 0 댓글수 0 2019. 8. 16.
  • [GCP] 3 - Kubernetes Architecture (1) : Concepts 지난 글에서 Container에 대한 내용과 kubernetes에 대한 기본적인 기능들에 대해서 소개했었다. 오늘은 Kubernetes에 대해서 더 자세히 알아보려고 한다. GCP 자료이다보니 내용에 GKE(Google Kubernetes Engine)에 대한 내용이 혼재되어 있다. 따라서 이를 최대한 정리하여 구분하려 한다. 그래야 OSS로 제공되는 K8s의 기능과 GKE로 향상된 기능을 명확하게 알 수 있기 때문이다. * Kubernetes Objects > 공식적으로, Kubernetes Object는 persistent entity로써 현재 수행되고 있는 클러스터의 상태를 나타낸다. 상태 값은 그 클러스터가 가져야 하는 desired state와 현재의 상태를 나타내는 current state가 .. 공감수 0 댓글수 0 2019. 8. 13.
  • [GCP] 2 - Container and Kubernetes in GCP 이전 글에서 GCP에 대한 기본적인 내용을 알아보았다면, GKE(Google Kubernetes Engine)을 알아보기전에 Container와 Kubernetes에 대해서 알아보자. > 일반적으로 application을 빌드하고 수행하는 경우, Dedicated Server(ex.물리적인 서버)에서 수행을 하게되면 H/W에 종속된 S/W가 만들어진다. 이렇게 개발된 S/W는 개발된 H/W와 호환성을 갖는 장비에서만 수행이 가능해진다. > VM(Virtual Machine)을 사용하는 경우 H/W를 가상으로 생성할 수 있기 때문에 H/W에 대한 의존성이 줄어들지만 대신 Kernel(OS)에 대한 의존성은 여전히 존재하게 되며, 여러개의 app이 동일한 VM에서 수행이 되는 경우 Dependencies들이.. 공감수 0 댓글수 0 2019. 8. 12.
  • [영화리뷰] 완벽한 타인 (Intimate Strangers, 2018) - 우리, 관계의 정의 왜 그랬었는지 기억나지 않지만 '완벽한 타인'은 많은 사람들이 추천했음에도 영화관에서 보지 못했다. 대신 내 방 침대에 누워 스트리밍 서비스로 작은 핸드폰을 통해 큰 울림을 얻었다. 다른 사람들이 추천한 영화였기에 나는 엄청나게 큰 기대감을 가지고 있었기에, 처음 영화를 볼때 공연을 앞둔 개그맨 앞에서 팔짱을끼고 한번 웃겨봐라라고 마음의 장벽을 두룬 사람과 같이 사실 이 영화가 얼마나 대단한지 평가하고자 하는 마음이었다. 완벽한 타인은 정말 잘 쓰여진 각본 위에 배우들의 완벽한 연기력이 만들어낸 훌륭한 작품이다. 한 장소에서 대화로 긴장감과 몰입감을 이끌어 내는 것이 예전 맨프롬어스를 보는 듯한 느낌을 받았다. 거기에 더불어 제목에서부터 영화가 끝날 때까지 던져주는 선명한 메세지는 관객들의 머리속에 박혀.. 공감수 2 댓글수 0 2019. 8. 12.
  • [GCP] 1 - Introduction to Google Cloud Platform 요즘 Public Cloud Provider들의 경쟁 열기가 뜨거운 것 같다. AWS가 독보적인 서비스 제공으로 시장을 장악하는 듯하더니 요즘은 MS Azure가 적극적인 마케팅의 결과로 빠르게 시장점유율이 증가하고 있다. 그리고 Google 또한 적극적으로 경쟁에 가세하기 시작했다. (https://www.channelpartnersonline.com/2019/02/07/azure-still-king-in-public-cloud-while-azure-grows-fastest-ibm-falls/) 몇 달 전 사내에서 GCP(Google Cloud Platform)에 대한 설명회가 열려 참석할 기회가 있었다. 사실 설명회 내용만 놓고 봐서는 AWS와 경쟁하기 위한 더 좋은 점을 찾지는 못하였다. 설명회에서.. 공감수 0 댓글수 0 2019. 8. 11.
  • [빅데이터]HDFS와 Cloud Storage 비교 & 장단점 https://cloud.google.com/blog/products/storage-data-transfer/hdfs-vs-cloud-storage-pros-cons-and-migration-tips HDFS vs. Cloud Storage: Pros, cons and migration tips | Google Cloud Blog With the recent merger of Hadoop companies Cloudera and Hortonworks, some are asking: Is the Hadoop file system officially dead? The news around this merge cloud.google.com * 위 글을 참조하여 작성되었으나, 주관적인 생각이 녹아있습니다. 물론.. 공감수 1 댓글수 1 2019. 8. 4.
  • [보안끄적] LDAP/AD/Kerberos 비교 + SSL 동작방식 보안은 모든 곳에 있고 어디에서나 중요하다. 엔터프라이즈의 환경에서는 계정 정보를 통합하여 관리하고 서비스 하는 경우가 많다. 따라서 제공하는 솔루션에서 계정관리 시스템과 연계할 수 있도록 해야 하는데, 이때 인증Authentication/인가Authorization는 매우 중요한 요소이다. 그리고 일정 수준 이상으로 성숙한 솔루션들은 웹을 기반으로 제어할 수 있도록 기능을 제공한다. 이때 민감한 시스템의 경우는 내부망에 구성했음에도 불구하고 SSL을 적용하는 경우가 더러 있다. 이를 위해서 간단하게 간을 보았다. * LDAP - LDAP의 기능은 무엇인가? > LDAP (Lightweight Directory Access Protocol)은 네트워크 상에서 어떠한 정보(전화번호, 주소, 조직, 파일, .. 공감수 3 댓글수 0 2019. 6. 25.
  • 3장 1절 - 데이터 분석 개요 1장부터 공부하기에는 너무 고리타분하여 3장부터 진행한다.. 전체적으로 용어가 다양하고 각 분석 방법에 대한 구분을 하는 것이 중요할 것으로 보인다. #### 학습목표 - 데이터 처리 프로세스 이해 - 데이터 분석 기법 중 시각화를 이해 - 데이터 분석 기법 중 공간분석을 이해 - 데이터 분석 기법 중 탐색적 자료 분석을 이해 1) 데이터 처리 - 보통 Data Warehouse(DW)나 Data Mart(DM)에서 데이터를 가져오며 해당 데이터가 없는 경우 직접 Legacy 에서 가져오기도 한다. - 운영데이터를 직접 가져오는 것은 부담이 됨으로 Operational Data Source(ODS) 을 통해서 운영데이터를 가져오거나 Staging Area에서도 가져올 수 있다. - Staging Area.. 공감수 0 댓글수 0 2019. 6. 25.
  • [20190318] 연습, (main/벤 180도) Lesson Learned (1) 애드립 시 루트 패턴을 잡아 놓고 변형을 하면서 진행해야 한다.(A - A' - A '' - B - B ' - A 와 같이..) (2) 많은 음을 부는 것 보다 변형을 주면서 박자를 맞추는게 중요하다. 단, 계속 정박으로 불지 않도록 주의한다. (특히 연속된 음을 많이 부는 것은 스케일 연습하는 것처럼 들린다...) ) (3) 허밍으로 항상 연습하고 괜찮은 거를 메모리 해서 패턴화 해야한다. ------------------------------------------------------------------------------ TO-DO - 코드톤 연습하기.. (악보뽑기/쓰기) - 알티시모 운지 - 호흡 공감수 0 댓글수 0 2019. 3. 19.
  • [zookeeper] 과반수 구성 이유 (majority voting/quorums) zookeeper를 구성하는 경우 과반수 선출(majority voting/quorums)을 위해 zookeeper server의 수를 홀수로 구성할 것을 권고한다. 개발/테스트 환경을 위해서 1대로 구성하는 경우가 아니라면, 보통 3대로 구성하며 더 failure에 대해 견고하게 구성하고자 한다면 5대로 앙상블ensemble을 구성하게 된다. * 그렇다면 zookeeper를 짝수로 구성하면 어떠한 문제가 생기는 것인가?결론적으로 말하면 그렇다고 해서 문제가 생기지는 않는다. 다만 4대로 구성하는 경우는 결함failure 에 대한 수준이 3대로 구성한 것과 다르지 않으며, 6대로 구성한 경우도 5대로 구성한 경우와 다르지 않다. 예를들어, zookeeper server 4대로 운영하던 중 leader역할.. 공감수 0 댓글수 0 2019. 2. 9.
  • [영화리뷰] 더 랍스터 (The Lobster, 2015) - 사랑은 서로 같음이 아니다. * 더 랍스터 (The Lobster, 2015) - 사랑은 서로 같음이 아니다. (해당 글은 영화에 대한 스포일이 포함 되었을 수 있습니다.) " 전대미문의 커플 메이킹 호텔! 이곳에선 사랑에 빠지지 않은 자, 모두 유죄! 유예기간 45일 안에 짝을 찾지 못하면 동물이 되어야 한다! 가까운 미래, 모든 사람들은 서로에게 완벽한 짝을 찾아야만 한다. 홀로 남겨진 이들은 45일간 커플 메이킹 호텔에 머무르며, 완벽한 커플이 되기 위한 교육을 받는다. 그럼에도 불구하고 짝을 얻지 못한 사람은 동물로 변해 영원히 숲 속에 버려지게 된다. " - 네이버 영화 줄거리 中 오랫동안 미루고 있다가 미세먼지 많은 토요일 오후, 암실로 만든 내 방에 누워 '더 랍스터The Lobster' 를 보고 말았다.'이퀼리브리엄 .. 공감수 11 댓글수 0 2019. 1. 12.
  • [spring] @Autowired @Autowired 는 기본적으로 타입이 일치하는 빈을 찾아준다. 동일한 타입을 가진 빈이 여러개 있는 경우는 필드 이름과 동일한 bean id를 갖는 bean 을 주입하게 된다. 공감수 0 댓글수 0 2019. 1. 5.
  • [20181226] 제주살이의 결론 제주살이 올해(2018年) 제주도에 대한 막연한 환상으로 휩싸여 있었다. (아니 사실 도망치고 싶은 마음이 컸는지 모르겠다) 제주 카카오 본사로 이직하고 제주도에 내려오면 어떨까? 라는 생각의 연장선의 사전답사의 이유도 이번 제주 여행의 한 부분이였다. 여행의 끝에서 내린 결론을 먼저 말하자면, 지금의 위치에서 도망치지 말자. 바다 좋다. 비행기를 타면 2시간 정도면 집에 올 수 있다(아무 문제가 없다면 강원도 보다 접근성이 좋다) 하지만 여기도 결국 사람이 살기엔 좋은 점도 있고 나쁜 점도 있다. 내가 사는 곳과 같이 치열하게 사는 사람들도 있고, 누구의 말처럼 한량처럼 살며 자신의 인생에서 도망치는 사람도 많다. 내가 제주 생활에 대한 생각을 접은 이유는 무엇일까? 첫 번째로 변덕스러운 날씨. 대체로.. 공감수 0 댓글수 0 2019. 1. 1.
  • [HDFS] TestDFSIO : Benchmark tools on hadoop cluster -하둡 클러스터 성능분석 도구(1) Benchmark tool on hadoop cluster - 하둡 클러스터 성능분석 도구(1)TestDFSIO : 스토리지 성능 분석 도구 개요- 하둡 분산 환경에서 클러스터 성능 분석을 수행을 위한 도구- 비교하고자 하는 대상들의 스토리지의 특성을 파악하기 유용하다. > 테스트에 사용하고자 하는 파일의 크기 및 개수를 쉽게 설정 할 수 있다. > write , read, append에 대한 through put을 결과로 얻을 수 있다. - 기본적으로 하둡 릴리즈에서 hadoop-mapreduce-client-jobclient-*-tests.jar로 패키지되어 제공된다. - 각 작업들은 mapreduce를 통해 수행된다. (reduce는 결과 출력을 위해 사용되며, 1개로 고정) 사용법- yarn ja.. 공감수 0 댓글수 0 2018. 12. 6.
  • [Java] Java Process Error/Pending Analyze - 실행 중인 java 프로세스 에러 분석하기. 개요Java의 특성이자 장점인 Object에 대한 동적할당이 때로는 우리의 발목을 잡는다. 일반적으로 대부분의 문제들은 log4J로 생성되는 로그들이나 GC로그를 통해 확인할 수 있다. Java 프로세스가 느려지거나 멈추는 현상은 대부분 메모리 부족으로 인한 gc/swap 으로 인한 것이기 때문에 리소스가 충분하다면 손쉽게 문제를 해결 할 수 있다. 하지만 log에 특별한 exception이 발생하지 않고, log.level을 DEBUG로 변경하였는데도 특별한 에러가 발견되지 않는다면 우리는 조금 더 복잡한 방법으로 문제를 확인해야 한다. 많은 접근 방식이 있겠지만 가장 쉽게 생각할 수 있고 많은 레퍼런스가 있는 JVM thread dump 와 JVM heap dump 방식을 보려고 한다. 1. JVM .. 공감수 1 댓글수 0 2018. 12. 5.
  • [HDFS] Hadoop 3.x new feature : Erasure coding * HDFS Erasure coding (Hadoop 3.0.0-alpha1, HDFS-7285) 1. 개요1) HDFS의 storage 및 network overhead를 줄이기 위해서 고안됨 2) 3-replica 는 데이터 블록의 중복으로 인해 200%의 storage space overhead를 가지나, EC(Erasure Coding) 방식은 데이터 블록의 절반의 패리티parity 블록을 위한 50%의 overhead를 가짐그림1 - Erasure coding의 storage efficeincy : https://blog.cloudera.com/blog/2015/09/introduction-to-hdfs-erasure-coding-in-apache-hadoop/ 3) EC는 HDFS replic.. 공감수 1 댓글수 2 2018. 11. 22.
  • [시] 나희덕 - 파일명 서정시 : 쓰라림의 공감 요즘과 같이 바쁜 날들을 보내다 보면 주위 사람들과 소통하고 공감할 수 있는 시간이 부족하다. 아니 사실은 노력이, 공감하기 위한 노력이 없다. 다른 이와 공감하는 것은 철저하게 나의 자유의지에 달렸지만 숨 쉬듯 공감되는 말이나 행동이 있고 진심으로 공감하고 싶지만 도저히 이루어지지 않는 것들이 있다. * * * 공중에 새를 심었다 이제 하늘 밖으로 날아갈 수 없는 새들은바람에 흔들리는 모종처럼작고 가벼운 날개를 파닥거린다 날아도 날아도 그 자리 ....... 일용할 양식을 낟알처럼 쪼아대며새들은140자 안에서 허락된 자유를 누리고단문을 점점 좋아하게 되고공백과 기호들을 풍성하게 사용할 줄 알게 되지 새들은 오늘도 윗, 윗, 윗, 윗, 트윗, 트윗, 트윗,지상의 작은 방앗간에서 파일명 서정시 - 「새를 .. 공감수 0 댓글수 0 2018. 11. 22.
    문의안내
    • 티스토리
    • 로그인
    • 고객센터

    티스토리는 카카오에서 사랑을 담아 만듭니다.

    © Kakao Corp.