AI로 자료검색 하시는 분들 노하우가 있나요?

[dd]

연구직입니다. 

 

쥐피티 유로로 일년 넘게 구독하다가 몇달전부터 몇년 전 얘기를 현재 시점으로 말하는게 심해진다고 느껴서 제미나이 유로로 넘어갔습니다. 

 

제미나이 쓰는데 분노조절이 잘 안될정도에요 (정말로요.. 저 성격 파탄자 같아요..)

설정에 이런저런 조건 다 입력해두었어요. 소용 하나도 없어요. 

 

1. 젤 싫은거는 자꾸 앞에 했던 아무 관련 없는 얘기 어거지로 자꾸 연결하는거. 

예를 들면 뭐 하다가 잠깐 주식 생각나서 물어보다가 다시 연구 주제로 돌아갔다면

"주식이 떨어져서 심난하실텐데 연구가 어쩌구어쩌고이군요" "이런 말도 안되는 연결을 매 응답마다 합니다. 

제발 그러지좀 말라고 매번 애원해도 안됩니다. 세팅에 입력해도 안됩니다. 

 

2. 지 맘대로 자꾸 종결 멘트를 합니다.

이것도 제발 그러지 말라고 애원해도 안됩니다. 

위와 연결해서 쓰면 

"주식으로 속상하실텐데 오늘은 이만 여기까지 연구하시고 이제 푹 쉬세요. 당신은 그럴 자격이 됩니다" 뭐 이런 .. 쓰다보니까 또 열받네요

 

3. 자료 찾는거 말이에요

제가 허위 자료 찾지 말라고 레퍼런스 찾고 진짜 있는건지 확인하라고 세팅에 아주 한문단을 입력해놓았는데도 안됩니다. 방금도 

참고할 국내 논문: 이철원. (2001). XXXXX.  한국여가레크리에이션학회지 , 21, 137-147. (이 논문 140~142페이지 근처에 클라이버의 핵심 주장이 아주 잘 요약되어 있습니다.)

 

이렇게까지 말하는거에요 역시 있지 않은 논문이었어요. 저 괄호친 부분 진짜 빡칩니다. 

 

 

제가 잘못 사용하고 있는걸까요?

인문사회 연구하는데 쓸건데 이제 클로드로 넘어갈까요? 이건 좀 낫나요?

 

[음]

걍 생성형인공지능의 한계같은데요??

[ㅇㅇ]

아직은 지피티가 그나마 나은듯요;;

[ㅇㅇ]

클로드 쓰지 마세요. 클로드가 코딩에선 훌륭할 수 있으나 다른 자료 검색에선 완전 꽝이라고 생각해요. 거짓말을 진짜 대놓고 해요.
너 거짓말좀 그만하고 제발 모르면 모른다고 말하라고하면 그제서야.
미안해 사실 잘 모르겠어. 내가 그럴듯하게 지어냈을거야...
이런식이에요.

정말 자주 이래요.

[dd]

아.. 윗님 그런가요 클로드가 희망인가 했는데.. 심지어 12개월 구독이 싸길래 다음달에 하려고 생각하고 있었거든요.

"너 거짓말좀 그만하고 제발 모르면 모른다고 말하라" => 우아 이거 진짜 제가 맨날 하는 말이에요. "제발" 자까지 붙여서 제발 거짓말좀 그만하고 모르면 모른다고 말해달라고 매번 애원.. ㅠ

[...]

유료 버전이고 무료 버전이고 안써봐서 잘 모르겠지만, 요즘은 구글로 검색해도 AI 요약이라고 먼전 띄워주잖아요
AI 요약에 근거 문헌 딱 첨부해서 보여주니 의심스러우면 첨부된 사이트나 문헌 다시 확인하고요
해보니 한글로 질문하는 것보다 영어로 질문하는게 훨씬 퀄리티있고 제대로 된 검색결과를 주길래 요즘은 웬만하면 영어로 질문해요. 심지어 국내용 내용이라 한글검색해야하는 것도 영어로 물어봐도 한글결과보다 훨씬 더 잘 검색해주던 걸요

유료버전을 사용하려면 미리 원하는 분야를 먼저 학습시켜야하지 않나요?
그 학습을 얼마나 제대로 잘 시키느냐에 따라 성능이 결정될 것 같은데요
제가 사용해본 결론은 AI에 미리 학습 혹은 주입된 데이터베이스 내에서 검색 추론해서 보여주는 거라 이 데이터베이스의 품질에 따라 대답이 결정되는 것 같더라구요
제가 학술문헌 펴놓고 검색해본 적 있는데, 문헌의 내용은 인터넷에 올라온 적이 없고, 검색 데이터베이스 안에 구체적인 내용 자체가 없으면 틀린 답, 혹은 꾸며낸 답을 내놓는 것 같더라구요. 오답을 뻔뻔하게 정답으로 내놓아서 책이랑 비교하면서 코웃음 친 적도 있었거든요
그래서 그 책 내용을 다시 고대로 정확하게 적어서 검색하면 그나마 어디서 꾸역꾸역 찾아내기는 하더라구요.
그래서 검색범위가 되는 데이터베이스의 품질과 양, 신뢰도에 따라 AI의 검색결과가 천차만별로 달라지는구나를 확인했었어요. 그리고 얼마나 질문을 정교하게 하느냐에 따라서도 다르고요

그래서 학문적으로 사용할 때는 구글 스칼라나 국내용인 경우는 dbpia만 신뢰하게 되더라구요
여기서도 검색 키워드나 질문을 아주 정교하게 해야하는 게 관건이긴 하지만...

[ㅇㄹㅇㄹ]

AI한테 '거짓말하지 말라'고 말하는 건 역효과라고 알고 있어요. 오히려 출력은 제약되고 더 사실처럼 보이는 환각을 만들어낼 가능성이 높아서요.

[ㅇㄹㅇㄹ]

대화 스타일 값을 조정할 수 있는데 그거 해보세요. 친절하게, 간결하게, 이런 옵션 있어요.

[ㅎㅎㅎ]

전 무료버전이긴 하지만, 1,2번 너무 공감요..ㅎㅎㅎ
2번은 그냥 가볍게 무시하고 있고요.
1번 경우에는 주제 바꿀 때마다 새채팅으로 리셋해요.
그리고 기존 대화는 모두 저장안되고 자동 삭제되도록 했어요.
3번은 아예 신뢰가 바닥이라 다른 AI랑 크로스체크하거나 아님 바로 구글이나 네이버 등에서 직접 찾거나 해요.

[그냥]

한계를 인정하고 확인 다 해야죠
그래도 제미나이가 나아요
같은 채팅에서는 한 주제로만 묻는 게 좋아요
연구주제 묻다가 주식 묻다가 하면 안돼요
그리고 기본 데이터가 부실할수록
AI도 그 부실한 자료에서 생성해 대답해요
답변 끝에 작은 숫자 누르면 참조한 소스 나오는데
그 자료부터가 근거가 희박한 자료인 거죠
우리나라 것 외에 해외 관련 사이트들을
여러 개 찾아서 연결해가면 질이 높아져요
해외논문 요약은 제미나이보다 노트북LM도 좋아요

[ㄴㅇㄹ]

자료 검색이 중심이라면 퍼플렉시티는요? 저는 딥리서치 기능 잘 쓰고 있어요

[제미나이]

1번 진짜 심해요 ㅋ
내가 질문 한번이라도 했던거를 다 이어다 붙여서 나에대해 다 아는척을..
제 옆에 동료도 그거땜에 약올라 죽으려고 하더라고요.
아무리 그러지 말라고 해도 소용없대요.
클로드도 한때는 넘사벽이라고 생각했는데 요즘보니 또 그것도 아니예요.
저는 그냥 똑같은거 세군데 다 물어봐서 취사선택해서 써요. ㅋㅋ