본문 바로가기

Kaggle19

딥러닝은 가챠중독이다 Computer Vision쪽 딥러닝 대회에 발을 들였습니다. 데이콘에서 제공한 baseline코드를 바탕으로 두고Kaggle 포럼, 챗지피티, 데이콘 등을 보며 최신기술을 파악하여 앞으로 사용할 템플릿을 조금씩 짜고 있습니다.Tabular data 머신러닝이랑 어느정도 비슷하지 않을까 하는 가벼운 마음에서 발을 들였는데완전히 다르더라구요.... 제가 느낀 큰 차이점은 다음과 같습니다: Tabular data 머신러닝 대회CV 딥러닝 대회데이터 전처리 방법이 다양한가?O△Feature Engineering을 하는가?OX모델 아키텍쳐가 다양한가?△O일반적인 수준의 EDA가 유용한가?OX순위에 영향을 미치는 것Feature Engineering, Tuning모델구조, Tuning 최신 머신러닝 대회들을 보.. 2025. 4. 14.
[머신러닝 대회 입문] 분류? 회귀? Task란? 최근 패턴인식 과목에서 머신러닝 대회 팀플을 하고 있습니다.2학년 과목(...)이라 그런가본의 아니게 팀원분들을 제가 가르쳐가며 진행하는 중인데요,가르치다보니 초보 분들의 입장에서 뭐가 어려운지를 알게 되더라구요. 오늘은 최근 들어온 질문 중 하나이자,인공지능의 존재의의,가장 중요한 Task에 관한 이야기를 해보겠습니다. 소개 - Task란 무엇인가?인공지능 모델은 어떤 일을 할 수 있을까요? 역사적으로 무릇 위대한 지도자들은 인재의 장점을 파악하여 적재적소에 배치하는 능력이 매우 뛰어났다고 알려졌습니다.아무리 뛰어난 도구를 갖고 있어도 그 잠재력을 이해하지 못했다면 제대로 활용할 수 없겠지요. 인공지능도 마찬가지입니다. 인공지능은 아주 강력한 도구이지만, 동시에 그 장점과 단점이 명확합니다.따라서 인공.. 2025. 4. 12.
[ML 대회 해설] 데이콘 부동산 허위매물 분류 해커톤 10등 풀이 - Feature Engineering 이제 거의 다 왔습니다!이번 포스트에서는 이전 글의 EDA를 바탕으로 진행한 최종 Feature Engineering 를 보여드리겠습니다. 이전 글: [ML 대회 해설] 데이콘 부동산 허위매물 분류 해커톤 10등 풀이 - EDA본격적으로 데이터의 주요 Feature의 개요를 살피고,EDA를 수행해 feature engineering을 위한 insight를 얻어보겠습니다. 이번 대회는 feature가 상당히 많은 관계로 주요 feature와 그 engineering 방법만을 짚here-lives-mummy.tistory.com Overview본 대회는 일반적인 데이터분석 대회들과 달리train이 약 2,400건으로 데이터 크기가 매우 적습니다.따라서 feature engineering 시 public sc.. 2025. 4. 1.
[ML 대회 해설] 데이콘 부동산 허위매물 분류 해커톤 10등 풀이 - 소개 자취방 찾을 때, 인터넷에서 괜찮은 매물만 추려다 가보면 허위매물인 경우가 많습니다.그럴 때마다 시간은 시간대로 쓰고, 기분만 잔뜩 상해버리곤 하죠. 이번 대회에는 이런 킹받는 부동산 허위매물을 걸러내는 모델을 만들어보겠습니다. 대회 소개데이콘 2025년 첫 대회입니다!2025년 1/6 ~ 2/28까지 총 두 달간 열렸는데요, 부동산 허위매물 분류 해커톤: 가짜를 색출하라! - DACON분석시각화 대회 코드 공유 게시물은 내용 확인 후 좋아요(투표) 가능합니다.dacon.io 저는 이번 대회에서 최종 10등을 했습니다!이 대회는 부동산 매물의 다양한 정보를 기반으로 부동산의 허위매물 여부를 판단하는 이진 분류 문제입니다.  데이터 개요데이터 파일각각 간단히 설명하면1.train.csv : 모델을 학습시키.. 2025. 3. 29.
[ML 대회 해설] Kaggle: Regression with an Abalone Dataset Public 8등 풀이 - Feature Engineering & Model Tuning 이번 글에서는 EDA에서 얻었던 Insights를 토대로 최종 선택한 Feature Engineering과 모델 튜닝을 보여드리겠습니다. 이전 글: [ML 대회 해설] Regression with an Abalone Dataset Public 8등 풀이 - EDA지난 포스트에 이어, 이번 글에서는 데이터의 특성, feature의 개요를 EDA를 통해 살펴보겠습니다. 만약 아직 ML에 익숙하지 않은 분들이라면 Dacon 아파트 실거래가 예측 AI 경진대회부터 해보시는here-lives-mummy.tistory.com 개요이전 글에서 얻은 Insights는 아래와 같은데요, 이 중 제가 선택한 것만 굵은 글씨로 표시해보겠습니다:Insight 1. 상관계수가 높은 feature 중에서는 몇 개를 drop해야할.. 2025. 3. 29.
[ML 대회 해설] Kaggle: Regression with an Abalone Dataset Public 8등 풀이 - EDA 지난 포스트에 이어, 이번 글에서는 데이터의 특성, feature의 개요를 EDA를 통해 살펴보겠습니다.  지난 글:  [ML 대회 해설] Regression with an Abalone Dataset Public 8등 풀이 - 소개 (1)전복 좋아하시나요? 저는 별로 안 좋아하는데요,  시장 갈 때 마다 가격보고 기함하는 식재료 중 하나입니다.특히 큰 놈은 부르는게 값이더라구요. 한국에서는 전복의 크기를 표현할 때, kg에here-lives-mummy.tistory.com  Overview전복의 나이는 어떻게 알 수 있을까요?전복 패각의 나이테를 확인하면 됩니다. 전복은 나무처럼 해를 거듭할수록 패각에 나이테가 늘어납니다.때문에 속살을 긁어내 패각 안쪽 나이테를 세어보면 나이를 알 수 있지요. 하지만 .. 2025. 3. 12.
[ML 대회 해설] Kaggle: Regression with an Abalone Dataset Public 8등 풀이 - 소개 (1) 전복 좋아하시나요? 저는 별로 안 좋아하는데요,  시장 갈 때 마다 가격보고 기함하는 식재료 중 하나입니다.특히 큰 놈은 부르는게 값이더라구요. 한국에서는 전복의 크기를 표현할 때, kg에 몇 마리가 되는지를 뜻하는 단위 '미' 를 사용합니다. 그리고 이 크기는 전복의 나이와 밀접한 연관성이 있다고 알려져 있습니다. 하지만 전복에게 나이를 물어본다고 답할리는 없겠죠.따라서 이 대회에서 우리는 전복의 여러가지 내, 외적 요인을 종합해 전복의 나이를 예측하는 모델을 만들어볼 것입니다. 저는 이번 시즌에서 Public 8등, Private 전세계 상위 5%를 차지했답니다! 대회 소개Kaggle season 4, episode 4 (2024년 4월 ~ 5월) 대회로, 상당히 최근에 개최했습니다. Regressi.. 2025. 3. 11.
[ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - Feature Engineering (실패편) 이번 포스트에선 Feature Engineering (성공편)에서 다루지 않았던,실패한 Feature Engineering들과 실패한 이유에 대해 얘기해보겠습니다.  지난 글: [ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - Model Tuning그간 따라오시느라 고생 많으셨습니다! 이제 거의 다 왔습니다.  지난 글에서는 EDA로 얻었던 insight를 기반으로 Feature Engineering을 진행했습니다.지난 글: [ML 대회 해설] Dacon 아파트 실거래가 예here-lives-mummy.tistory.com 개요우리는 EDA 단계에서 얻은 다양한 insight를 기반으로 feature engineering을 수행했습니다.기존에 있던 feature에서 노이즈를.. 2025. 3. 10.
[ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - Model Tuning 그간 따라오시느라 고생 많으셨습니다! 이제 거의 다 왔습니다.  지난 글에서는 EDA로 얻었던 insight를 기반으로 Feature Engineering을 진행했습니다.지난 글: [ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - Feature Engineering (성공편)지난 글에서는 EDA를 통해 각 데이터의 특성을 분석하여데이터 전처리 방법과 파생 Feature 아이디어를 얻어냈습니다. 지난 글: [ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - EDAhere-lives-mummy.tistory.com 이번 글에서는 완성한 모델에 최적화된 hyperparameter와 앙상블 방법을 찾는 Tuning 과정을 보여드리겠습니다. Hyperpa.. 2025. 3. 3.
[ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - Feature Engineering (성공편) 지난 글에서는 EDA를 통해 각 데이터의 특성을 분석하여데이터 전처리 방법과 파생 Feature 아이디어를 얻어냈습니다. 지난 글: [ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 2등 풀이 - EDA (2): Object type Feature EDA이번 포스트에선 object type feature의 EDA를 수행해보겠습니다.  지난 글:  [ML 대회 해설] Dacon 아파트 실거래가 예측 AI 경진대회 3등 풀이 - EDA (1): Numeric Feature EDA오늘은 저번 포스트에서 뽑은 Numerhere-lives-mummy.tistory.com 이 글에서는 이를 바탕으로, 제가 제출한 최종 답안에서 Feature Engineering을 어떻게 하였는지를 설명하겠습니다.실.. 2025. 2. 25.