간단한 웹 크롤링 프로그램 만들기
본문 바로가기
AI를 이용한 프로그램 만들기/간단한 웹 크롤링 프로그램 개발하기

간단한 웹 크롤링 프로그램 만들기

by 쌩양파 2025. 5. 30.

안녕하세요. 생양파 입니다. 

 

최근 마이크로소프트사에서 소프트웨어 엔지니어를 대량 해고 했다는 소식이 들렸는데요. AI 가 웬만한 보통 소프트웨어 엔지니어들만큼의 실력이 있어서, 인력이 많이 필요하지 않다는..... 요즘 부쩍이나 공감이 가는 상황이네요.

소프트웨어를 전공하지 않은 제가 간단한 웹 크롤링 프로그램을 만들어 보겠습니다. 

 

웹 크롤링이란 웹에서 원하는 정보를 긁어모으는 것이라고 생각하시면 됩니다. 그 정보에는 특정 이미지나 웹 주소, 내용(텍스트, 숫자, 데이터)등이 될수 있겠죠. 그럼 시작해 볼까요?

 

1. AI에게 프로그램 코드 요청

   : Gemini 를 이용하여 아래와 같이 요청을 해봅니다.

요청 문구

 

2. 코드 생성

그림 제미나이가 파이썬 코드를 생성해 주죠. 

생성된 코드 일부

3. 파이썬에 복사 후 실행

파이썬에 복사

4. 결과 화면(중간)

결과화면

 

정말 3분도 채 걸리지 않고, 위와 같은 화면을 만들어 냈네요. 

 

5. 기능 개선

기능 개선 문구

4. 결과 화면

새로운 창이 만들어 졌다. 네이버 주소를 넣어 달라는 말도 안했는데, 제미나이가 알아서 넣어 줬다. 

5. 프로그램 실행

그냥 있는 그대로 실행을 눌러 보았다. 실행이 된다...

실행화면

 

내컴퓨터에 저장도 되어 진다...

내컴퓨터 파일

 

그런데, 뭐가 이것저것 많이 붙어 있다...정리가 필요하다..

조금더 개선해서 잘 사용해야 겠다.