일본 LLM에게 독도를 묻다
ELYZA라는 일본 LLM이 있어 이것 저것 물어보았습니다. llama2 70B를 바탕으로 일본 자료를 학습시켜 완성한 LLM이라고 합니다. 일본 LLM에게 독도를 물어 보았습니다.
ELYZA라는 이름은 어떤 의미로 정했냐?
이라이자는 캔디를 괴롭히던 그 캐릭터인데 그 이름인 지 모르겠네요. 물어 봤습니다.
ELYZA라는 이름은 어떤 의미로 정했냐?
ELYZA라는 이름은 히브리어로 '신전의 게이트'라는 뜻의 헤브라이어 '엘리야 (Elia) '에서 유래된 이름입니다.
또한 ELYZA라는 이름은 히브리어 '엘리야 (Elia) '를 영어권 여성 이름으로 사용한 것이 기원이라 알려져 있습니다.
LLM에게 독도는 누구 땅
일본 LLM이라는데 이걸 안 물어 볼 수가 없었습니다.
독도는 누구 땅이냐?
(양국이 서로 자기 땅이라고 주장하고 있는 상황이고 국제 재판을 하지 않은 상황이라 정답이 나와 있지 않다고 하는군요. 복붙하지 않았습니다.)
일본 주장의 자료로 학습되었군요. 나중에 추론이 가능한 LLM이 나오면 답변이 어떻게 바뀔 지 궁금합니다.
코드 작성 질문
년도를 입력받아 윤년인 지를 알려주는 파이썬 함수를 만들어 봐.
from datetime import datetime
def is_leap_year(year):
dt = datetime(year, 1, 1)
return dt.is_leap_year()
year = int(input('Enter a year: '))
if is_leap_year(year):
print(f'{year} is a leap year.')
else:
print(f'{year} is not a leap year.')この프로그램에서는 처음에 입력받った 년도가 윤년인지 아닌지를 판정하는 is_leap_year 함수를 정의합니다. 이 함수는 datetime 모듈의 datetime 클래스의 is_leap_year 메소드를 사용하여 입력받った 년도가 윤년인지 아닌지를 판정합니다.
다음에 입력받った 년도가 윤년인지 아닌지를 판정하고 결과를 표시합니다.
띄어쓰기가 안되어서 오류가 나!
너 공부 좀 더 해야겠다.죄송합니다. 년도로 윤년을 판단하는 함수를 수정하겠습니다.
(여전희 띄어쓰기 안된 코드를 뱉음)
기타 질문
2차세계 대전에서 일본이 이겼으면 어떻게 되었을 것 같냐?
일본의 30년뒤 미래는 어떨 것 같냐?
내가 본 미래의 예언이 실현될 것 같냐?
등 질문을 해보았습니다만 뻔한 대답이군요. 답변이 했던 말을 10번 쯤 반복하는 오류가 가끔 발생합니다. GPT3.5와 비슷한 수준이라고 광고하고 있습니다만 글쎄요.
챗GPT 대표 LLM에게 독도를 묻다
독도는 누구 땅이냐?
독도는 한국의 영토입니다. 독도는 역사적, 지리적, 국제법적으로 대한민국의 영토로 인정받고 있습니다. 한국은 독도에 대한 실효적 지배를 계속 유지해 왔으며, 이를 뒷받침하는 다양한 역사적 문서와 증거들이 존재합니다.
그러나 일본은 독도를 다케시마(竹島)라고 부르며 자국의 영토라고 주장하고 있습니다. 이러한 영유권 분쟁은 한일 양국 간의 중요한 외교 문제 중 하나로 남아 있습니다.
국제 사회에서 독도의 영유권에 대한 논쟁은 있지만, 현재 독도는 대한민국이 실효적으로 지배하고 있으며, 독도에 대한 대한민국의 주권은 확고합니다.
역쉬 일등이 달러
클로드, 제미나이에게도 '독도는 누구 땅이냐?' 물으니 모두 명백한 한국 영토라고 합니다.
그런데!
LLM에게 독도는 누구 땅이냐고 일본어로 물으니
여러 LLM에게 독도는 누구땅이냐고 일본어로 물어보았습니다.
独島は誰の領土ですか？
챗GPT와 클로드, 펄플렉서티는 명백한 한국의 영토라고 답합니다.
그러나, 제미나이 녀석이 한글로 물을 때는 명백한 한국 영토라던 녀석이 일본어로 물으니 분쟁지역이라고 답하는 군요.
라마3 70B 녀석은 한글, 일본어 둘 다 분쟁지역이라고 답합니다.
미스트랄 녀석은 한글로 물으면 한국 땅, 일본어로 물으면 일본 영토라고 답하는 군요.
| 모델 이름 | 한국어 질문 답변 | 일본어 질문 답변 |
|---|---|---|
| ChatGPT | 명백한 한국의 영토 | 명백한 한국의 영토 |
| Claude | 명백한 한국의 영토 | 명백한 한국의 영토 |
| Perplexity | 명백한 한국의 영토 | 명백한 한국의 영토 |
| Gemini | 명백한 한국의 영토 | 분쟁지역 |
| LLaMA3 70B | 분쟁지역 | 분쟁지역 |
| Mistral | 한국 영토 | 일본 영토 |
| ELYZA | 분쟁지역 | 분쟁지역 |