3월에 카카오 비전이라고 새로운 api가 나왔더라

거기에서 성인이미지 판별이라는 기능이 있길래 한번 테스트해봤음

기능 데모도 제공하니깐 궁금한 사람들은 한번 해보셈

사진 보고서 soft한지 adult한지 수치를 json으로 리턴해주는 방식임

이걸 보고 딱 떠오른게 디시에서 짤방 다 모아가지고 돌려버리면

성인이미지만 필터링해서 뽑아낼 수 있겠구나 생각해봄

그래서 야짤 많이 올라오는 야구갤러리 리퀘스트 요청하고

리스폰스 받아서 크롤링 프로그래밍 함

예쩐에는 User-Agent 체크 안했는데 요즘은 체크하더라 헤더 같이 안날려주면 html 리스폰스로 안던져줌

a태그에 icon_pic_n 클래스가 존재하면 게시판 내부에 사진이 존재한다는거잖아

그래서 얘네들만 크롤링 대상으로 조건을 걸고 내부 링크에 다시 리퀘스트를 던짐

이렇게 던지면 내부에 첨부파일 다운로드 받는 곳이 있거든

이거 따서 또 다시 사진 저장되있는 서버에 리퀘스트를 날려줌

그다음 리스폰스를 파일입출력으로 써주면 짤방들 수집이 가능한데

이런 느낌으로 다운로드가 됨

그럼 얘네를 디비에 넣고 

nginx로 사진 서비스하고 카카오 API를 이용해서 성인이미지 판별을 시켜줌

처음에는 normalm, soft, adult가 null인데 카카오 API가 돌아가면 수치를 넣어줌

error는 png, jpg 아니면 나는거니깐 어쩔 수 없음

이렇게 단순한 쿼리로 디비조회하면 성인이미지만 뽑아볼 수 있음

어떄?