Skip to Content

AI로 자료조사, 출처 붙었다고 믿었다가 링크를 눌러본 이야기

오늘의 AI

“이건 출처가 딱 붙어 나오니까 믿어도 돼.” 옆에서 일하는 후배가 그러길래 고개를 끄덕였다. 요즘 AI 검색은 답변 밑에 각주처럼 링크가 주루루룩 붙어 나오니까. 나도 그 링크만 보고 안심하던 사람이었다.

아니, 정확히는 안심하고 싶어서 안 눌러본 거였다. 링크가 붙어 있으면 어딘가 확인된 것처럼 보이니까, 그 파란 글씨를 그냥 믿고 문서에 옮겨 적었다. 그러다 한 번 진짜로 눌러본 날, 그 문장이 계속 머리에 걸렸다.

사람들이 검색을 AI로 갈아탄 진짜 이유

나만 그런 게 아니었다. 오픈서베이 ‘AI 검색 트렌드 리포트 2026’을 보면 한국에서 ChatGPT 이용률이 54.5%로 과반을 넘겼고, Gemini도 이용 경험률이 28.9%로 전년 대비 세 배쯤 뛰었다더라. 만족도만 놓고 보면 Gemini 77.3%, ChatGPT 70.6%로 오히려 Gemini가 앞선다는 것도 좀 의외였다. “무조건 챗GPT”가 정답이 아니게 된 셈이다.

여기서 눈에 걸린 건 사람들이 갈아탄 이유였다. ChatGPT를 쓰는 이유로 46.0%가 ‘검색 결과 자동 요약 기능’을 꼽았다는 대목. 그러니까 다들 “요약이 편해서” 옮겨온 거다. 나도 딱 그거였다. 열 개 탭 열어놓고 읽는 대신, 한 번에 정리된 걸 받아보는 맛.

그런데 쓰고 보니 이게 좀 다르다. 요약이 편하다는 건, 뒤집으면 누군가가 원문을 압축하는 과정이 한 단계 끼어든다는 뜻이다. 그 압축을 사람이 아니라 AI가 한다. 그 지점에서 뭐가 조금씩 틀어질 수 있다는 걸, 그때는 몰랐다.

챗GPT와 제미나이 이용률·만족도 비교

링크를 눌러보고 나서야 알았다

계기는 별거 아니었다. AI한테 어떤 통계를 물었는데, 답변에 언론사 기사 링크가 붙어 나왔다. 평소 같으면 그냥 옮겨 적었을 텐데 그날은 어쩐지 한 번 눌러봤다. 페이지는 열렸다. 그런데 그 안에 내가 받은 그 숫자가 없었다. 비슷한 기사이긴 한데, 정작 인용됐다는 그 문장이 안 보였다.

머리를 띵 맞은 기분으로 자료를 좀 찾아봤더니, 이게 나만의 착각이 아니었다. 컬럼비아대 저널리즘 리뷰(CJR)의 토우 센터가 2025년 3월에 낸 연구가 있는데, ChatGPT Search·Perplexity·Copilot·Gemini·Grok 등 여덟 개 AI 검색 도구에 1,600개 질문을 던져본 조사다. 결과가 셌다. 전체 질문의 60% 이상에서 오답이 나왔다.

숫자만 보면 “AI가 원래 좀 틀리지”로 넘길 수도 있다. 근데 진짜 무서운 건 그다음이었다. 이 연구가 짚은 건 틀리는 빈도가 아니라 틀리는 태도였다. ChatGPT는 기사 134개를 잘못 식별했는데, 그중 “확실하지 않다”는 식으로 유보 표현을 쓴 건 200개 응답 중 딱 15번뿐이었다더라. 나머지는 다 확신에 찬 말투였다. 틀린 걸 어찌나 당당하게 말하는지, 안 믿을 재간이 없는 거다.

내가 링크에 없는 숫자를 그냥 옮겨 적을 뻔한 것도 결국 이 태도에 넘어간 거였다. 말투가 단정하면 사람은 그냥 믿는다.

출처가 붙어 있어도 안심이 안 되는 이유

여기서 한 번 더 걸렸다. 그럼 링크라도 꼬박꼬박 붙는 도구를 쓰면 되는 거 아닌가. 처음엔 나도 그렇게 정리했다. 그런데 그 토우 센터 연구를 더 보니 그게 아니었다.

Gemini와 Grok 3는 응답의 절반 이상이 조작되거나 깨진 URL을 인용했다고 한다. 특히 Grok 3는 인용 200개 중 154개가 엉뚱한 오류 페이지로 연결됐다. 링크는 파랗게 잘 붙어 있는데, 눌러보면 404거나 그런 내용이 없는 페이지인 거다. 내가 겪은 게 딱 이거였다.

한술 더 떠서, 유료 버전이 더 안전한 것도 아니었다. 프리미엄 모델이 질문에 ‘답’은 더 많이 했지만, 확신에 찬 오답을 더 많이 내면서 오히려 오류율이 더 높게 나온 경우가 있었다는 대목. 돈 낸다고 정확해지는 게 아니라는 소리다.

그러니까 링크가 붙어 있다는 사실 자체는 안심의 근거가 못 된다. 그게 이 글에서 내가 제일 오래 붙잡은 문장이다. 링크 존재는 링크 사실을 보장하지 않는다. 있는데 깨졌거나, 있는데 그 내용이 없거나, 있는데 옛날 정보이거나. 실제로 한 조사를 보면 AI 인용 오류가 통째로 지어낸 날조보다는 ‘오래된 정보·엉뚱한 페이지·다른 대상과 혼동’ 쪽이 더 흔하다더라. 그래서 링크가 있으면 오히려 더 방심하게 되는 게 함정이다.

AI 출처 링크를 믿기 어려운 세 가지 경우

질문할 때 미리 손을 좀 쓴다

이런 얘기 하면 “그럼 AI로 자료조사 하지 말라는 거냐” 싶을 텐데, 그건 아니다. 나도 여전히 초벌은 AI로 한다. 조건 여러 개 붙은 복잡한 리서치나 초안 잡기엔 이만한 게 없다. 다만 받은 걸 그대로 믿지 않고, 질문 단계에서부터 몇 가지를 건다.

질문할 때부터 “출처를 포함해서 설명해줘”라고 박아 넣는다. 근거가 붙으면 뒤에 확인하기가 훨씬 쉬워진다. 그리고 큰 질문을 한 번에 던지지 않고 작게 쪼갠다. 한 번에 여러 개를 처리하게 하면 그만큼 추측이 섞인다는 걸, 헛짚는 답을 몇 번 받고 나서 알았다. 대상·기간·조건을 뭉뚱그려 물으면 AI가 그 빈칸을 추측으로 메운다.

받은 답은 이 순서로 확인한다

질문을 아무리 잘 던져도 결국 답을 받은 다음이 진짜다. 출처 링크는 붙어 있어도 실제로 눌러본다. 페이지가 열리는지, 그 안에 정말 그 내용이 있는지까지. 수치·날짜·이름·인용문은 원문이랑 문장 단위로 대조한다. AI가 요약하다 가장 잘 틀어지는 데가 딱 이 부분이라. 그리고 중요한 건 최소 한 곳에서 교차 검증한다. 다른 AI든, 아니면 구글에서 원본이든. 결국 “AI로 찾고, 구글로 확인한다”는 이중 구조로 돌리게 됐다. 출처 검증이 중요한 리서치는 각주가 촘촘한 퍼플렉시티 같은 citation-first 도구로 초벌을 뜨고, 원본은 직접 방문해 눈으로 본다.

이 얘기, 예전에 긴 문서를 통째로 붙여넣다 낭패 본 이야기랑도 통한다. 편하다고 다 맡기면 어디선가 꼭 대가를 치른다.

솔직히 나도 매번 이렇게 다 하진 못한다. 급할 땐 링크 하나 눌러보는 것도 귀찮아서 그냥 넘긴 적이 있다. 근데 그렇게 옮겨 적은 게 나중에 틀린 걸로 밝혀지면, 그게 더 뒷감당이 크더라. 그날 링크 하나 안 눌러본 대가를 며칠 뒤에 치르는 셈이다. 그러니 요약이 아무리 편해도, 마지막에 파란 글씨 한 번 눌러보는 그 3초는 아직 사람 몫으로 남겨둬야겠다.