분류(Classifier) 문제 시 발생하는 클래스 불균형(Smote) 세상에 잘 정제된 데이터만 있으면 얼마나 좋을까요? 하지만 그건 너무 비현실적입니다. 그래도 우리는 이런 쉽지 않은 데이터를 기반으로 유의미한 예측을 하고 분류를 진행해야 합니다. 결측값이 너무 많다거나, 데이터의 이상치가 너무 크거나, 아니면 데이터의 분포가 한쪽으로 쏠리는 등 업무현장에서 많이 마주하게 됩니다. 1. 클래스불균형이란 그 중 제가 첫번째로 잡은 주제는 클래스 불균형 , 예측하려고 하는 클래스가 불균형한(한쪽으로 쏠린) 데이터셋를 가지고 분류를해야 할 때 입니다. 대표적인 예가 "고장분류" 입니다. 어떤 상품이 고장인지 정상인지 분류하는 데이터가 있다고 하면, 아마 98%의 데이터는 정상이라고 할 것이며, 2% 정도가 고장이라고 하는 데이터 일 겁니다.(왜냐면 고장이라는것이 흔한 현상은 .. 빅데이터분석기사 취득 Real 후기(비전공자) 후후 이렇게 쓰면 많이 방문하겠지(?) 하지만!! 실제로 나는 데이터관련 전공자가 아니고, 빅데이터분석기사를 취득했으니 다 맞는말이다 단지 비전공자지만 데이터분석업무를 하고 있어서 파이썬으로 데이터 전처리는 매우 쉽다는점 빼고는... 때는 바야흐로 올해 5월 데이터분석가업무로 취업한 이후 3개월간의 야생에서의 업무 적응을 마치고 이제서야 숨을 돌릴 수 있을 때 스스로에 대해 데이터분석직무를 하기에는 내가 아직 부족하구나 라는 생각을 많이 했었다 그래서 관련 자격증도 딸겸! 그리고 공부도 할겸 해서 데이터 관련 자격증을 찾다가 빅데이터 분석기사를 발견했다 문과 출신인 내가 기사자격증이라니 나도모르게 기사라는 단어에 홀려 필기시험을 덜컥 신청해버렸다 약 2달간 공부했는데, 직장인이라 평일에는 거의 1시간밖에.. 2022 회고 - 안녕하세요, 글 쓰다보니 재밌네요 IT관련 업(?)을 하는 사람들의 필수 코스가 있습니다 이제 서른을 맞이하여 트렌드를 리드할 수 없는 나이입니다, 트렌드를 헐레벌떡 따라 가야 합니다 1. 기술블로그 개발자들의 꽃이죠, 뭐 1일1커밋 등 많은 용어를 탄생시킨 기술 블로그 그래서 티스토리를 만들었습니다. 이후 Git도 만들어서 따로 사이드프로젝트나 제가 공부하며(구글링하며) 사용한 코드를 정리할 예정입니다. "기억보다 기록을" 이라는 배민의 한 리드 개발자가 생각나네요(꽤 옛날 영상으로 알고 있습니다) https://youtu.be/V9AGvwPmnZU 멋집니다 어떤일이든 꾸준히 하는게 참 쉽지않고, 초심을 유지하는일은 어려운데 역시 배민 리드 개발자는 괜히 되는게 아닌것 같습니다 2. 회고 개발자들의 또.. 우당탕탕 데이터분석 이야기 안녕하세요 현재 기업에서 데이터분석 업무를 하고 있는 사람1 입니다 제가 공부하고 분석한걸 기록하기 위해 시작합니다. 블로그 이름이 우당탕탕 그 잡채인 이유는 글을 우당탕탕 쓸꺼랍니다 주소가 livelightly인 이유는 삶을 가볍게 살기를 목표로하고있습니다 통통 무겁게 살지 말고 다들 가볍게 살아요~~!~! 그래도 나름 기술블로그를 지향하고 있기때문에 ㅎ 개발 이야기를 조금해보자면 제가 주로 사용하는 언어는 Python를 쓰고 있습니다 그 외에는 sql과 Tableau를 쓰고 있고요 앞으로 블로그에 머신러닝과 딥러닝관련하여 글을 올릴 예정입니다~~ 혼자 데이콘 참여하면서 제 기술을 고도화 시키는데 같이 하실분 환영입니다 아예 바보는 아니라는 증거입니다 그러니 저 껴주세요 열심히 할게요 밤이 늦어 오늘은.. 이전 1 다음
