핵심 요약
- 논문은 GEO-Bench 라는 평가 묶음을 만들고 글을 손질하는 기법들을 비교했습니다.
- 최대 40% 라는 수치는 2023년 실험 환경에서 나온 값이라 지금 그대로 기대하기는 어렵습니다.
- liveGPT 는 기법 이름 대신 계약한 질문의 인용 횟수로 결과를 보여 드립니다.
이 논문은 무엇을 했나요?
생성형 엔진이 답변을 만들 때 어떤 글이 더 많이 쓰이는지를 재려고 GEO-Bench 라는 평가 묶음을 만들고, 글을 손질하는 방법들을 서로 비교했습니다. 논문은 이런 손질로 답변 속 노출을 최대 40%까지 올릴 수 있다고 보고했습니다.
이 결과를 지금 어떻게 봐야 하나요?
실험 환경이 2023년의 엔진과 고정된 문서 묶음이었다는 점을 함께 봐야 합니다. 이후 여러 엔진으로 다시 잰 연구에서는 같은 기법의 이득이 줄거나 사라진 경우가 있었고, 우리 측정에서도 같은 질문의 답이 물을 때마다 달라져 한 번의 실험값을 그대로 옮기기 어렵습니다.
liveGPT 는 이 논문을 어떻게 쓰나요?
기법 이름을 영업 문구로 쓰지 않고, 계약한 질문을 반복해 물어 몇 번 중 몇 번 인용됐는지로 결과를 보여 드립니다. 논문은 무엇을 시도해 볼지 정하는 출발점이고, 무엇이 통했는지는 고객의 질문에서 나온 기록으로 판단합니다.
이 논문에서 우리가 가져온 것
기법 목록이 아니라 재는 방식을 가져왔습니다. 무엇을 바꿨을 때 답변이 달라지는지 확인하려면 같은 질문을 같은 조건으로 되풀이해 물어야 한다는 점입니다. 또 하나는 조건을 밝히는 습관입니다. 이 논문이 어떤 엔진과 어떤 문서 묶음에서 잰 값인지 적어 두었기 때문에, 우리는 2026년에 그 수치를 그대로 쓰기 어렵다는 판단을 할 수 있었습니다. 우리 보고서도 같은 이유로 엔진과 위치 설정, 반복 횟수를 수치 옆에 붙여 적습니다.
자주 묻는 질문
GEO 논문대로 하면 우리도 40% 늘어나나요?
그렇게 보기는 어렵습니다. 논문의 수치는 정해진 평가 묶음 안에서 나온 값이고, 그 뒤 여러 엔진으로 다시 잰 연구에서는 같은 기법의 효과가 사라지기도 했습니다. 그래서 숫자는 참고만 하고 결과는 우리 질문으로 직접 재는 편이 정확합니다.