국내 🇰🇷에 있는 모든 핫딜 게시판을 모아서 한 페이지에서 보고자 시작한 프로젝트입니다.몇 개의 핫딜 게시판부터 시작해서 점차 사이트를 늘릴 예정입니다. 모든 핫딜 게시판을 가지고 있는 사이트와 관리자 그리고 제보해주신 분들꼐 감사드리며, 크롤링을 할때 robots.txt를 보며 작업하지만 그럼에도 불구하고 문제가 생길시 지체 없이 프로젝트 중단 할 것을 약속드립니다.
- robots.txt를 절대 준수합니다.
다른 무엇보다 중요한 규칙입니다. 각 사이트의 robots.txt를 엄격하게 준수하며, 놓쳤을 경우 제보해주시면 즉각 반영하겠습니다.
윈도우 환경(WSL) 또는 리눅스 환경에서 실행해주시면 됩니다:
docker-compose up -d
- Python 3.12.2
- Scrapy 2.11.2
- Poetry
- Duckdb 1.0.0
- FastAPI 0.111.0
- React 18
- Docker-compose
- Nginx