Current clothing shopping malls and search platforms are keyword-oriented search. In addition, it is a system in which people had to input the information on clothing one by one and write the name and description of the product themselves. There is a need for a platform that can automate such a current clothing search system and search for sentence units rather than keyword-oriented. In this study, we intend to minimize manpower resources and repetitive work by implementing automation of clothing product description and sentence search in online shopping malls. To this end, we implement a web service that recommends three clothes with the most similar captions when a user queries in sentence units using an image capping model implemented by deep learning and natural language processing. Neuraltalk2, a model in which CNN and RNNs appear continuously for caption generation, are used, and vector similarity is used to learn using Korean morpheme analysis techniques, and based on this, inference results are developed to be serviced on the web. The developed service can be expanded to a technology that can recommend even subtle feelings that can be expressed in user sentences if various data are added.
한국어
현재의 의류 쇼핑몰이나 검색 플랫폼은 키워드 중심의 검색 위주이다. 또한 의류의 정보를 사람이 일일이 입력하여 상품의 이름과 설명을 직접 작성해야 하는 시스템이다. 이러한 현재의 의류 검색 시스템을 자동화하고 키워드 중심이 아닌 문장 단위 검색이 가능한 플랫폼이 요구되는 실정이다. 본 연구에서 온라인 쇼핑몰의 의류 상품 설명 자동화와 문장 검색을 구현함으로써 인력 자원과 반복 작업을 최소화하고자 한다. 이를 위해 딥러닝으로 구현된 이미지 캡셔닝 모델과 자연어 처리를 이용하여 사용자가 문장 단위로 질의하면 캡션이 가장 유사한 의류 3벌을 추천해주는 웹 서비스를 구현한다. CNN과 캡션 생성을 위한 RNN이 연속적으로 나타나는 모델인 Neuraltalk2을 활용하였고, 한국어 형태소 분석 기법을 이용하여 벡터 유사도를 활용하여 학습하였으며 이를 기반으로 추론 결과를 웹으로 서비스할 수 있도록 개발하였다. 개발된 서비스는 다양한 데이터를 추가한다면 사용자의 문장으로 표현 가능한 미묘한 느낌까지 추천이 가능한 기술로 확장이 가능하다.
목차
요약 Abstract Ⅰ. 서론 Ⅱ. 관련 연구 Ⅲ. 제안된 시스템 설계 및 개발 1. 데이터 수집 및 저장 2. 데이터 증강 3. 데이터 라벨링 4. 이미지 캡셔닝 모듈 5. 자연어 처리 모듈 Ⅳ. 구현 결과 Ⅴ. 결론 및 제언 참고문헌
키워드
패선인공지능딥러닝컴퓨터비젼자연어 처리추천시스템FashionArtificial intelligenceDeep learningComputer visionNatural Language ProcessingRecommendation system
저자
김병규 [ Byung-Gyu Kim | 숙명여자대학교 IT공학과 교수 (Professor, Department of IT Engineering, Sookmyung Women’s University) ]
Corresponding Author
제주대학교 융합과학기술사회연구소 [JEJU NATIONAL UNIV SCIENCE AND TECHNOLOGY IN SOCIETY RESEARCH CENTER]
설립연도
2012
분야
사회과학>사회과학일반
소개
- 과학문화와 사회의 소통, 지역 내 과학기술사회 관련 현안 이슈를 발굴하고 해결방안을 선도 연구하며, 관련 분야 인재양성과 과학문화 기반확충에 이바지하고자 함.
- 4차 산업혁명과 지능정보사회가 도래함에 따라 미래사회에 적합한 인재 양성 및 학교 교육 혁신 필요성이 대두됨에 따라 학교 교육에 접목할 수 있는 미래 선도 혁신 모형 연구 개발 및 교원의 역량 강화를 지원함으로써 학교현장 실천ㆍ적용ㆍ안정화를 모색
- 과학과 사회의 소통ㆍ융합 관련 현안이슈 발굴, 해결방안 연구 선도
- 과학기술ㆍ사회 관련 연구 및 소통프로그램 확대를 통한 과학문화 기반 확충
- 융합인재교육 특성화 연구 및 프로그램 기획, 운영하여 제주지역 융합 ICT 우수인재의 조기양성 주도, 도내 공공기관과 지역대학간 협력연계 전략 마련
간행물
간행물명
융합과학기술사회연구 [Journal of Convergence Science, Technology, and Society]