keyduck개발일지11

🌟키덕 개발일지 - 11

🎯깃허브 링크

https://github.com/Juhyung990122/Keyduck_back

🎯프로젝트 소개

🎯진행내역

• 크롤러로 키보드 데이터 긁어서 JSON형태로 만들기

🎯에러로그 및 메모

에러는 딱히 없습니다! 다만 고민되는점이 있는데 서버에서 동작할때 request가 부하가클지, 서버내에서 크롤러가 돌아가는게 부하가 클지 잘 모르겠어요. 가져오는 데이터가 많고 크롤러를 나름 자주 돌릴생각이여서 그냥 직감에 서버단에서 돌아가는거보단 외부로 뺴는게 낫겠다라는 느낌이 들긴 하는데… 확신은 안서네요 8ㅅ8.. 일단은 크롤러를 프로젝트 외부에서 돌린뒤 가져온 데이터를 JSON화 시켜서 서버로 request 보내는 형식으로 정하고 구현했습니다! 적절한 주기를 정하면 배포한곳에 같이 올려서 crontab으로 자동화시킬 생각이에요.

-> 크롤러는 자주돌리지만 업데이트할 데이터가 얼마없다는 점 + 데이터를 왕창넣은 이후 배포할 예정이라 POST요청을 통해 데이터를 넣기로 했습니다.