"시계 반대 코드!"에 다시 오신 것을 환영합니다. 블로그 시리즈는 일상적인 작업을 간소화되고 시간을 절약해 주는 경이로운 작업으로 바꿔줍니다. 오늘 저는 반복적인 수동 작업을 자동화된 발전소로 전환한 프로젝트를 공유하게 되어 기쁩니다. 시간을 절약하고 작업 흐름에 흥미를 더할 수 있는 방법을 알아볼 준비가 되셨나요? 뛰어들어 보세요!

뒷이야기

스타트업에서 일하면 다양한 부서와 협력하고 자동화에 적합한 비효율성을 발견할 수 있는 기회와 같은 장점이 있습니다. 최근 마케팅 팀과의 대화에서 저는 단지 기술 업그레이드가 필요한 작업을 발견했습니다. 수동으로 수행되었습니다:

• 매일 Product Hunt를 방문하여 오늘의 상위 5개 제품을 얻으세요.
• 각 제품 제조업체의 소셜 미디어 세부정보를 수집합니다.
• 이 과정을 매일 반복합니다.

듣자마자 '자동화하면 어떨까?'라는 생각이 들었습니다. 노트북을 들고 코딩을 시작했습니다.

문제 분석

이 문제를 해결하려면 스크레이퍼를 만들어야 했습니다. 다음은 제가 취한 접근 방식에 대한 간략한 요약입니다.

1. Product Hunt의 구조 이해: Product Hunt가 콘텐츠와 사용하는 API를 렌더링하는 방법을 조사했습니다. 그들은 최고의 제품과 자세한 정보를 표시하기 위해 서버 측 렌더링을 사용합니다.

2. 도구 선택: 웹사이트가 서버 측 렌더링을 사용하기 때문에 Node.js와 함께 Puppeteer를 사용하기로 결정했습니다. Puppeteer를 사용하면 헤드리스 브라우저를 제어하고 마치 수동으로 탐색하는 것처럼 콘텐츠를 스크랩할 수 있습니다.

3. 데이터 가져오는 중:

   • 상위 5개 제품: 오늘의 상위 5개 제품을 얻기 위해 Product Hunt 웹사이트를 스크래핑하는 것부터 시작했습니다.
   • 제품 세부정보: 각 제품에 대해 클릭하여 제품 ID를 가져왔습니다.
   • 메이커 정보: 제품 ID를 사용하여 API에 접속하여 제품 메이커에 대한 세부 정보를 가져왔습니다.
   • 소셜 미디어 정보: 제작자 ID를 가지고 Puppeteer를 통해 각 사용자의 프로필 페이지를 방문하고 소셜 미디어 정보를 스크랩했습니다.
   • 데이터 저장: 마지막으로 이 모든 정보를 CSV 파일로 정리하여 마케팅 팀이 쉽게 작업할 수 있도록 했습니다.

CSV 출력은 다음과 같습니다.

이것이 중요한 이유

이러한 작업을 자동화하면 시간이 절약될 뿐만 아니라 인적 오류도 줄어들고 마케팅 팀이 항상 최신 데이터를 손쉽게 확인할 수 있습니다. 또한 이는 기술이 어떻게 반복 작업을 간소화하고 가치를 더할 수 있는지 보여주는 훌륭한 예입니다.

참고: 소스 코드를 원하시면 언제든지 저에게 핑을 보내주세요 :)

당신 차례입니다!

코드를 사용하여 작업을 자동화한 적이 있습니까? 아래 댓글로 여러분의 경험과 팁을 공유해 주세요! 어떤 작업을 자동화하고 싶나요? 논의해보자!

마지막으로 글이 도움이 되셨다면 박수 부탁드리며 팔로우 부탁드립니다!