AI주의) 이런게 가능할까 싶어서 물어봤다가 의외의 힌트를 얻었다. > 유머게시판

우선 내가 작성한 질문글 뭉탱이부터

AI 에이전트가 아래 동작을 수행할 수 있는지 궁금합니다.

- 특정한 커뮤니티 사이트의 첫페이지 URL을 제공하면 해당 페이지에서 링크되는 정보 1depth까지를 크롤링하여 요약하여 제공합니다.

- 게시글로 생성된 정보와 댓글로 생성된 정보를 분리하여 밈성 자료를 제외하고 해당 커뮤니티의 주제를 추출합니다.

- 주제와 무관한 자료는 가치없음으로 제외하고, 주제와 연관된 정보성 자료만 요약하여 신규 정보로 취급합니다.

- 이걸 별도 요청 없이 자동화하여 현재의 트렌드정보처럼 요약본을 받아보고 싶습니다.

현재 존재하는 챗GPT, 제미나이, 클로드 등의 범용 AI 에이전트로 이러한 일이 가능할까요? 아니면 삼성 갤럭시 휴대폰의 내장 AI로 가능할까요?

그러면 요구사항을 조금 더 구체화 해볼게요.

1. 인터넷 서비스가 아닌 로컬 머신에서 웹페이지를 크롤링합니다. 제한량을 우회하기 위해서 전체 게시글이 아닌 베스트 게시물만 간헐적으로 딜레이를 두고 수집합니다.

2. 로컬 AI 모델이 이 정보를 분석하고 요약하여 뻘글과 밈을 필터링하고 요약정보만 남깁니다.

3. 이해하기 쉽게 수집된 기간안에 언급된 토픽의 언급량순별 5위까지, 신뢰도순 5위까지 총 10개의 자료를 우선 제공하고, 주제가 더 많을 경우 기타 언급된 자료들 또한 별도 요약하여 제공합니다.

이런 프로그램을 작성할 수 있을까요?

이중에 주제별로 크롤링만 대행해주는 서비스는 없을까요? 자료 수집 과정을 간략화하면 구현 난이도가 낮아질거라고 생각합니다

실제로 내가 수집하고싶은 정보는 일반적인 범용 커뮤니티 반응같은게 아닌, 젠레스 존 제로같은 게임의 최신 자료를 원하는데 반해서 해당 게임의 커뮤니티를 보고 있으면 의미있는 자료를 찾기가 어려워서 그렇습니다. 특히 혐오성 밈을 이용하는 인간성이 결여된 사용자의 반응같은건 보고싶지 않습니다. 이부분을 해결할 방법이 없을까요?

라는 식으로 질문을 이어갔는데, 답변이야 뭐 AI스러운 뻔한 답변을 줄거라고 생각했었거든

근데 이런 답변을 얻고 나니까 참 생각하게 많아지네

커뮤니티 보면서 피곤한 이유가 진짜로 의미있는 정보나 즐거운 볼거린 없고 독성정보만 넘쳐흘러서 문제인거라 ㅋ

AI주제에 이런 소리까지 할 정도면 뭐 앞으로의 정보수집은 이런 형태가 될 가능성이 높아보여

마침 요즘 AI가 가장 잘하는게 이런 처낼거 처내는 요약이니까 쓸모도 참 많을거고