[캡스톤디자인 - Adultree] 크롤링해서 얻은 텍스트, 이미지를 파일로 저장하여 google drive api를 이용해 drive에 업로드하기
💬 왜 이러한 일을 하게 되었는지 먼저 졸업 프로젝트에서 가장 중요한 기능은 자립준비청년이 텍스트로 궁금한 점에 대해 물어보았을 때, 챗봇이 사용자에게 필요한 정보를 제공하는 기능이다. 우리는 이러한 챗봇이 정보를 제공해줄 때의 정확성을 높이기 위해서 RAG를 이용하기로 하였다. RAG 구축하는 과정에서 chroma DB로 벡터 DB를 구축하고 이 벡터 DB에 자립준비청년에게 도움이 되는 정보(주거 정보, 취업 정보, 조례 등)를 크롤링하여 넣어주기로 하였다. 🍥 selenium으로 크롤링을 해보자!https://wikidocs.net/137914 6) 동적 웹크롤링 - selenium 소개 및 기초사용법# 1. Selenium 패키지란? selenium 패키지는 chromedriver를 제어하거나..
project
2024. 11. 25. 16:29