낭만과 열정사이

요즘 연구자들 사이에서 핫한 질문 하나, "ChatGPT가 인간 코더를 대체할 수 있을까?" 이 질문에 답하기 위해 네덜란드 기본소득 논쟁 트윗 데이터와 독일 연금개혁 신문 기사 데이터를 사용해 ChatGPT의 성능을 꼼꼼히 검증한 논문이 나왔습니다. 결론부터 말하자면, 아직 인간 코더가 완전히 대체되긴 어렵지만, 가능성은 충분히 보인다! 오늘은 이 논문을 통해 ChatGPT의 정책 담론 분석 능력과 프롬프트 설계 방법을 구체적으로 소개해 드리겠습니다.ChatGPT로 콘텐츠 분석? 기존 연구들을 살펴보자!ChatGPT 같은 대형 언어 모델(LLM)이 콘텐츠 분석(content analysis)을 혁신할 수 있다는 아이디어는 최근 학계에서 큰 관심을 받고 있습니다. 그런데 이걸 진지하게 논하기 전에, 기존..

따끈따끈하게 Research and Politics에 최근 공개된 연구는 오픈엔드 설문 응답에서 발생하는 오타 문제를 효과적으로 해결하기 위해 OpenAI의 GPT-4o 대규모 언어 모델(LLM)을 활용한 방법론을 제시했습니다. 배경: 왜 오타 수정이 중요한가?오픈엔드 설문 응답은 응답자의 자유로운 의견을 수집할 수 있다는 점에서 유용하지만, 오타로 인해 데이터 분석 과정에서 오류가 발생할 수 있습니다. 오타는 다음과 같은 문제를 초래합니다:단어 집합의 불필요한 증가: "economey"와 "economy"가 같은 단어임에도 불구하고 별개의 단어로 처리됩니다.키워드 매칭 오류: 감정 분석이나 주제 분류를 위한 사전(dictionary)에 단어가 제대로 매칭되지 않습니다.패턴 발견 어려움: 데이터 간의 연..

현대 사회의 이념적 갈등, 예를 들어 미국 국회의사당 폭동이나 영국의 브렉시트와 같은 사건들은 정치적 양극화(political polarization)의 증가를 상징적으로 보여줍니다. 이러한 양극화를 더 깊이 이해하고 측정하기 위해, Catarina Pereira, Raquel da Silva, Catarina Rosa의 논문 "How to measure political polarization in text-as-data? A scoping review of computational social science approaches"는 컴퓨테이셔널 사회 과학(CSS) 접근법을 활용하여 텍스트 데이터를 분석하는 방법론들을 체계적으로 정리합니다. 이 글에서는 해당 논문의 주요 내용을 리뷰하며, 각 방법론의 특..

안녕하세요! 오늘은 "뉴스 댓글 섹션과 온라인 에코챔버"라는 흥미로운 논문을 소개하려고 합니다. 이 연구는 한국의 뉴스 포털 네이버(Naver)에서 수집한 방대한 댓글 데이터를 통해 온라인 에코챔버(동질적 정보에만 노출되는 환경)가 실제로 존재하는지, 그리고 그 현상이 보수 성향과 진보 성향 매체에서 어떻게 다르게 나타나는지를 탐구했습니다.연구 배경: 에코챔버란 무엇인가?에코챔버란 사람들이 자신과 비슷한 생각이나 의견만 접하며, 반대 의견에는 노출되지 않는 현상을 의미합니다. 디지털 시대에 이 현상이 강화되고 있다는 우려가 많습니다. 알고리즘에 의해 개인 맞춤형 뉴스가 제공되고, 사람들이 선호하는 매체만 소비하는 경향(선별적 노출)이 그 주된 이유로 꼽힙니다.하지만 최근 연구들은 이러한 우려에 의문을 제..