이번 광고 차단의 기능을 수행하는 기계학습 모델 만들기 프로젝트를 진행하게 된 이유는 다음과 같습니다. 광고 차단 규칙이 명시가 되어 있어 악성 광고사이트 제작자들은 이 규칙들을 보며 매번 새롭게 광고 사이트들을 만들어내고, AdGuard는 계속해서 필터링 규칙들을 업데이트해나가야 하는 구조이다. 따라서 자동으로 규칙을 업데이트 하지 않아도 알아서 잡아내도록 기계학습을 활용해보자! 프로젝트를 진행하며 광고 차단을 하는 기계학습 모델을 Fine-Tuning 했지만 진행하면서 이런 생각이 들었습니다. 그냥 애초에 필터를 공개 안 하면 이런 고생을 안 해도 되지 않을까? 아무래도 EasyList 같은 필터를 공개하지 않는 다면 악성 광고 사이트 제작자들이 규칙을 제대로 파악할 수 없어 악성 광고 사이트의 발전..

뭐 먹을까요? 깔깔깔 산학협력 프로젝트, 광고 차단 오토로 돌리기 (졸업 하고 싶어요ㅠ) 1. 오늘의 주제 이번에 진행한 프로젝트는 산학협력 프로젝트입니다! 주제는 '기계 학습을 통한 광고 사이트 자동 차단 프로그램' 입니다. 이미 광고 사이트 차단해주는 프로그램 있지 않아요? Ad xpmxf4.tistory.com 저번 글에 이어서 이번에는 전반적인 흐름과 전체적인 흐름에서 제가 선택한 기술들에 대한 이유와 근거에 대해 설명해보겠습니다! 1. 전반적인 흐름 저번 글에서 보여드렸던 프로젝트의 전반적인 흐름도 입니다. 위 과정을 조금 단순하게 나누면은 다음과 같아집니다. Google Trend 로 최근 키워드 확보 키워드들을 순열 조합, 검색을 실시해 URL 확보 URL 들에 쿼리를 보내 HTML 에서 태..

1. 오늘의 주제 이번에 진행한 프로젝트는 산학협력 프로젝트입니다! 주제는 '기계 학습을 통한 광고 사이트 자동 차단 프로그램' 입니다. 이미 광고 사이트 차단해주는 프로그램 있지 않아요? AdGuard 라던지... 맞습니다! 사실 저도 이미 잘 사용하고 있는 프로그램이죠. 프로젝트를 하기 전, Project ISL 을 진행하며 구글링을 하다 보니 어쩌다 광고 사이트를 방문하게 되었습니다! AdGuard 이 켜져있었음에도 불구하고! AdGuard 가 켜져있었음에도 막아지지 않는 광고사이트... AdGuard 는 분명 훌륭한 프로그램이 틀림 없습니다. 크롬 익스텐션 스토어에서 저 숫자의 사용자와 최고의 평점을 지닌 익스텐션은 전체 비율로 따져본다면 결코 많지 않죠. 하지만 이러한 AdGuard 가 막지 ..