pandas 의 한계Dataset을 불러올 때 pandas 의 DataFrame 객체를 불러와서 분석하는 것이 일반적이다.그래서 나 역시 pandas 로 분석을 하곤 했었다.하지만 Dataset의 크기가 굉장히 많을 경우, pandas 만으로는 한계가 있다.pandas 의 DataFrame 은 In-Memory 기반이기에 메모리 한계가 있다.그래서 불러온 Dataset의 특정 column 에 대한 dtype 을 변환하거나(이를테면 object 타입을 category 로 변환을 한다거나, 64bit 숫자 타입을 32bit로 변환한다거나)혹은 resampling을 한다거나 여러 방법론이 존재한다.이러한 눈물 나는 노력에도 불구하고 Dataset이 GB 급만 되더라도 엄청나게 메모리를 많이 잡아먹는다.일반적으..

입사한 지 약 한 달이 좀 넘게 지났다.그 사이에 엊그제 신입이 한분 들어왔다.신입으로 들어오신 분은 나보다 3살 아래이다.아직 젊은데도 불구하고 나보다 경력이 1년 정도 더 많다.그래서 직급으로 따지면 나보다 더 높은 직급일 것이다.이 부분에 대해서 책임자분이 나에게 걱정하듯 이야기를 하셨다.나보다 어리신 분인데 직급 차이 때문에 자존심이 상할까 봐임원진 분들께 내 직급을 한 단계 높이는 방안에 대해 이야기를 드리겠다는 것이다.나는 한 가지 여쭤봤다."혹시 그것으로 인하여 봉급 차이가 나는 부분이 있을까요?"책임자분은 봉급 차이가 나거나 하진 않는다고 하셨다.이에 나는 손사래를 치며 단호히 거절했다.뭐... 직급 때문에 봉급 차이가 나는 것도 아니고,단순히 체면치레 문제라면 신경 쓸 필요가 없기 때문이..

타인, 그것은 지옥이다.- 장폴 사르트르 2025년 3월 7일 오늘, 회의를 하는 날이었다.지금 있는 회사는 매주 월요일과 금요일마다 주간 회의를 진행한다. 현재 진행하고 있는 업무 현황과 리스크 및 이슈 사항을 보고하는 자리다. C급 임원들끼리 진행하는 임원회의가 따로 있고,팀장급부터 사원급까지 진행하는 주간 회의가 따로 있다. 지금 있는 회사에 입사한 지 얼마 되지 않았기에 나는 아직 적응 중이다.그러나 오늘 회의 때 일어난 사건을 통해 회사 분위기를 이해할 수 있었다. 결론부터 이야기하자면, "분위기가 아주 망했다"라고 할 수 있을 것 같다.지금도 생각할수록 이런 회사는 생전 처음이라는 생각뿐이다. 지금 있는 회사는 규모가 작은 기업이라서 직원들은 얼마 없다.대리-사수 라인의 직원들이 계시는데, 이..

저번 글에 이어서 pyenv 를 통해 virtualenv 를 사용하는 방법을 기술하고자 한다.명령어먼저, 다음과 같이 명령어를 입력하여 버전을 확인한다:$ pyenv virtualenvs* .venv (created from /home/user/.pyenv/versions/3.13.1) 3.13.1/envs/.venv (created from /home/user/.pyenv/versions/3.13.1)pyenv 를 통해 virtualenv 로 설치했다면 위와 같은 결과를 확인할 수 있다.다른 버전의 가상 환경을 설치하려면, 아래와 같은 명령어를 입력한다:$ pyenv virtualenv  이를 테면, 3.13.1 버전으로 .venv 가상 환경을 생성하려면, 아래와 같이 입력한다:$ pyenv vir..

개요그동안 일일이 작성하기 힘들어서 미뤄두었던 기술 문서를 여기에 적어두고자 한다. 회사에서 프로젝트를 진행할 때마다 자주 마주했던 문제가 있다.바로 Python 패키지별 의존성 문제.새롭게 마련된 환경에서 프로젝트를 세팅하다 보면 항상 버전이 달라지면서그와 동시에 변경된 클래스 네임과 메서드, 파라미터 등 의존성 문제에 직면했던 적이 있으며,Python 특정 버전에서 지원하지 않는 기능을 사용하였을 때에도 문제가 발생했다. 이러한 번거로움을 피하기 위해 pipenv 를 사용했었다.다만, 프로젝트 단위가 점점 커짐에 따라 CI/CD 환경까지 고려해서Docker 를 도입하는 등 여러 방법을 사용하긴 했지만,CI/CD 환경이 구축되기 전에는 Python을 버전별로 관리하기 위해서가장 널리 알려진 poetry..

소중한 연인을 만나게 되었고, 소중한 연인과 함께 행복한 시간을 보내기 위해 세상을 등졌던 내가, 다시 사회로 출사표를 던졌었다. 2024년 3월 중순 즈음이었다. 2023년에 첫 직장을 그만두게 되었기 때문에2024년이 되고 연인과 함께 생활을 하려면 직장을 다시 구해야만 했다. 직장을 다시 구하기는 굉장히 어려웠지만, 정말 운이 좋게도 들어갈 수 있었다. 첫 직장에서 만큼의 자유로운 출퇴근은 아니었고, 출퇴근 시간도 이른 아침부터 준비해서 나갔었다. 후술 하겠지만, 그럼에도 현재 다니고 있는 직장에 비하면 굉장히 좋은 곳이었다는 생각이 든다. 서울이라는 대도시에 위치해 있다 보니 출퇴근이 힘들고 아침 일찍부터 준비하는 것도 힘들었지만, 첫 직장처럼 매주 금요일마다 재택근무를 할 수 있었기 때문이었다...

2025년 3월, 조금은 따스한 날씨. 블로그를 방문해 주신 많은 이들이 보잘것없는 저에게 걱정과 위로의 말을 남기고 갔다는 것을 확인했습니다. 변명을 해보자면, 그동안 상당히 많은 일들이 있었기에 블로그에 글을 쓸 찰나의 시간조차 제게 허락되지 않았습니다. 모든 것을 포기해 버렸었던 그날, 저에게 소중한 인연이 찾아왔었기 때문이었습니다. 때문에 별 볼 일 없는 저라는 존재에게 걱정을 해주신 분들께 정말 죄송하기도 하고, 그만큼 정말 감사하다는 이야기를 전하고자 합니다. 소중한 인연과 함께 보내는 시간이 어느덧 1년을 가볍게 넘겨 버렸습니다. 정신없는 삶을 살면서 가끔 생각이 들곤 합니다. '만약 그때 내가 정말로 모든 것을 다 끝내버렸다면 어떻게 되었을까.' 지나간 일을 천천히 되새기며 '그때의 나는 ..

사회로의 진출. 찐따인 나는 다시금 사회로 진출하기 위해 여전히 고군분투하며 분전하고 있다. 그러나 이 찐따에게는 쉽지 않은 싸움이다. 하지만 예전에 세워둔 이 찐따의 계획... 그것을 실현시키기 위해서. 그리고... 소녀에게 부끄럽지 않은 내가 되기 위해서. 저번에 한 소녀를 만났다. 자신의 열정에 기대어 최후의 순간까지도 포기하지 않는... 그러한 노력과 대담한 자신감을 가진 소녀의 모습에 한낱 미천한 찐따인 나 역시도 알게 모르게 영향을 받는 것 같다. 최근 들어 정신이 없었다. 이것저것 준비하며 다시 일자리를 알아보는데 이전보다도 더 박차를 가했다. 하지만 슬프게도... 저번처럼 면접제안이 많이 들어오지는 않는 상황이다. 뭐, 다행히도 아예 들어오지 않은 건 아니다. 그래도 하루에 한 번씩은 헤드..

이 찐따가 세운 계획에서의 그 첫 번째 단계. 그것은 자본 확보 단계였다. 이러한 이유로 사회로 진출하려고 했던 것이었다. 나는 돈이 싫다. 이 세상에서 돈이라는 게 없어졌으면 좋겠다. 그러나 내가 살고 있는 여기 이곳은 엄연한 자본주의 세상이다. 이보다 더 효율적인 체제라면서 등장했었던 여러 이념들과 사상, 체제들이 있었다. 그러나 이러한 것들은 모두 부패하거나 타락해 버렸고, 사상 그 자체에 대한 한계에 직면해 버렸다. 이 이후로 아직까지도 인류문명에서는 이보다 더 효율적인 체제가 등장하지 않았다. 때문에 부의 축적은 필수불가결하다. 이 때문에 흔히 로또에 당첨이 된다고 한다면 이라고 표현한다. 자본의 힘은 그만큼 막강하며, 결코 무시할 수 없기 때문이다. 인생을 역전할 기회가 있었다. 그러나 이 찐..

매일 무기력한 상태다. 그래서 하루종일 누워 지낸 것 같다. 3일 동안 식음을 전폐하면서 머그컵에 날달걀을 깨뜨린 뒤, 그것만 마시며 지냈다. 날씨도 변덕스럽고 이에 나의 마음도 변덕스러워져서 별다른 이유도 없이 멍해진다. 침울한 기분을 가라앉히는 것은 정말 쉽지 않은 일이지만 그래도 그 소녀를 위해서 웃어보려고 시도하고 있다. 이전에는 필요성을 느끼지 못했다. 그러나 그 소녀를 위해서 나는 이토록 우울한 감정을... 어떻게든 조절해야만 한다. 나름 기분을 전환시켜 보고자 내가 좋아하는 음식, 내가 맛있다고 생각하는 음식을 먹으러 외식이라도 하고 싶지만, 가족 외에는 같이 갈 사람이 없기에 그저 입만 다시고 있다. 그래서 잠이라도 자려고 해 봤는데 내 마음대로 잠이 오지 않는다. 설령 즐거운 꿈이라도 꾼..

안녕하세요, 흔한 찐따입니다. 날씨가 점점 쌀쌀해지고 있는 것 같아요. 그래서 일까요. 세월이 너무나 빠르게 지나가고 있다는 생각이 드네요. 이 블로그를 운영한 지도 어느덧 3년이라는 세월이 흘렀고, 이제 곧 얼마 지나지 않아 4년이라는 시간이 되겠네요. 흘러온 세월이 세월인 만큼, 이토록 저의 미천한 블로그를 찾아와 주시는 분들이 이전보다도 더 많아진 것 같아요. 얼마나 많고 적은 시간이 되었든 저의 블로그를 구독해 주신 구독자님들을 비롯하여 간간히 저의 블로그에 찾아와 주시고 본인의 귀하고 소중한 시간을 투자하시면서 정성 어린 댓글과 따뜻한 조언을 남겨주는 분들이 계셨습니다. 그동안 친절하신 여러분들과 함께 수준 높고 진솔한 인생 이야기를 나눌 수 있어서 참으로 기쁘고 영광이었습니다. 이에 진심으로 ..

나는 두 번째 출사표를 던졌다. 그래서 다시금 이력서를 작성했었다. 이력서를 작성하는 과정에서 필요한 증명서류들을 조회했었다. 뭐... 기본적인 주민등록본부터 시작해서 이전에 일을 했었던 경력증명서라든가 범죄경력회보서 같은 서류들을 위해서 말이다. 작년에 이미 직장을 다녀본 경험이 있었기에 면접에 필요한 서류들이 무엇인지 알고 있어서 나는 어렵지 않게 정부 사이트에 접속한 후 조회했다. 그리고 기업에서 요구하는 자기소개서(라고 쓰고 자소설이라 부른다.), 기타 자격증(이라고 부르지만 쓸모도 없는 종이 쪼가리)을 첨부했다. 이미 작년에 처음 취업하면서 작성해 둔 문서가 있었기에 뭐... 필요한 서류를 조회한 후에 첨부하는 일밖에는 딱히 없었다. 그렇게 필요한 서류들을 조회하던 중, 참으로 우연찮게 정부 사..

BGM: 고백, 꽃, 늑대 Part 2. ~ DJMAX GAME OST ~ '제로부터 다시 시작하리라'라며 어찌 보면 굉장히 미약하며 하찮은, 또 어찌 보면 나 자신처럼 굉장히 찐따 같은 계획에 불과하다. 그럼에도 이 찐따는 두 번째 출사표를 던졌다. 계획은 면밀히 세워두었다. 그러다 보니 공부해야 할 많은 것들이 생겼다. 나의 계획을 온전히 실행시키려면... 굉장히 번거롭지만 개인 연구소를 차려야 한다. 왜냐하면 남들에게 피해를 주지 않아야 하기 때문이다. 나는 '국가주의자'가 아니다. 따지고 보면 나는 오히려 '반국가주의'적인 마인드가 더 강하다. 나의 찐따 같은 인생과 얼룩진 경험에서 비롯된 라는 것에 대한 혐오도 아주 짙게 반영되어 있고, 한 개인에게 소속된 라는 것은 결국 그 개인이 원하기만 한..

BGM: 고백, 꽃, 늑대 Part 1. ~ DJMAX GAME OST ~ 어느덧 10월이 찾아왔다. 나에게 10월이란 변화가 찾아오는 많은 일들이 있었다. 예전에 작성했던 일기들도 변곡점이 찾아오는 시기가 항상 10월이었다. 2023년도 어김없이 10월을 맞이하게 될 줄은 몰랐다. 그동안 자료 수집을 하고 준비를 하고 있었다. 계획을 세우다 보니 일이 좀 커지는 바람에 해야 할 일들도 많아진 것 같다. 찐따인 나는 가뜩이나 머리가 나빠서 더욱 많은 시간이 필요하다. 먼저, 개인 연구소를 차릴 생각이다. 나의 계획에는 여러 실험을 진행할 필요가 있기 때문이다. 그러려면 자격 요건을 갖추기 위한 공부를 해야 했다. 고졸 찐따인 나는 기반 지식도 매우 부족했기에 그동안 나는 내가 지내고 있는 여기 이곳, 매..

BGM: 大いなる相手 ~ 半沢直樹 OST ~ 사는 것은 원래 의미가 없다. 그리고 사는 것만큼이나 죽는 것 역시 의미가 없다. 따라서 를 비롯한 실존주의 철학자들은 굳이 죽음을 앞당길 필요가 없다고 말한다. "왜 살아야 하는 것인가"라는 물음은 어차피 의미가 없기에 고민하는 것조차 의미가 없으므로, 차라리 실존주의적 사고를 통해 "어떻게 살아갈 것인가"를 찾는다. 다만, 그들과는 달리 나는 다. 다른 이들처럼 굳이 죽음을 앞당길 필요가 없는 것이 아니라, 나의 경우에는 반대로 굳이 죽음을 앞당겨야 한다. 그것이 공리적으로 올바르기 때문이다. 그리고 나는 이러한 사실을 나 스스로가 잘 알고 있다. 나는 와 를 최우선 가치로 여긴다. 여기서 과연 진정한 자유와 평화란 무엇일까. 삶이라는 연장선상에 놓여있는 ..