[ChatGPT][ChueokUI] 08_추억 게임 시나리오 CSV_번외_01

https://525easy.tistory.com/89

• 이전 글에서 이어서 시작.
• 이번 글은 다른 채팅방을 사용한 지시의 사실 테스트 내용에 가깝다.

---

0. 목표

• prompt 확립 이전 plus 플랜 이용 시 어떤 모델이 적합한지를 산출한다.
  • 작성 기준 4.5의 경우 질문 제한이 걸려있다.
    • 질문 수 제한이 걸렸다고 하는데 사실 결과물도 그닥...
  • o3-mini, 03-mini-high, 4o를 대상으로 사용해볼 예정.
    • 기본적으로는 고급 이성이 빠르다는 o3-mini를 대상으로 한다.
• o3-mini 기준 개선의 여지가 안보인다 느껴지면 다른 모델로 테스트를 수행한다.

---

1. 작업 과정

1) 1차 채팅 - o3-mini 1차

• 이전 글에서 잘 되면 공개 안한다 했는데 중간 과정 프롬프트라 공개해도 무관할 것 같다.
  • 작업 방식을 바꾸지 않는한 사실 잘 안될 것 같다. 
• 어찌 되었던 저 이후 뭔가 더 작성 된 prompt를 제공하였다.
  • 이때부터 꼬롬했다.

• 이전 잠시 시도했던 4.5 모델과는 다르게 제공할 문서의 제목이 아닌 첫 번째 문서라고 표현하였다.
• 제공 될 문서는 총 6개로 구성이 되어있었다.

• 어찌 되었던 기본 룰은 지키는 것으로 보이는 듯 하지만 사실상 제공한 마크다운 문서의 요약본이었다.
• 어떤 문서의 경우에는 그냥 단어만 바꾼 수준이었다.

• 6번째 문서가 제공되니 최종 답변 내용이 달라지긴 했다.
• 원하는 형태와는 좀 달랐다. 답변이 2가지로 구성 되어있어서 그런지 답변도 좀 그랬다.
• 선택은 "CSV 데이터를 생성해"로 진행했으나 "다음 단계로 진행" 하였을 경우 어떤 것이 나올지가 불명확해보인다.

• prompt 개선을 통해 최종 예상 분량도 표기하도록 지시하였다.
• 이 때 동일한 문제가 발생했다.
• "다음 단계로 진행" 혹은 "다음 출력 요청" 1가지 명령어를 통해서 데이터를 생산해야 휴먼에러가 발생하지 않을 것 같다.

• 추가 데이터 생성을 위한 명령어가 모호한 듯 하다. 이 부분도 추가 수정해야할 것 같다.

---

• n번째 문서가 아닌 문서 제목으로 요청하도록 수정

• 명령어 적용 방식의 수정

---

2)  2차 채팅 - o3-mini 2차

• 최초 명령어 입력에 대한 답변은 나름 괜찮아진 것 같다.

• 전체 리스트가 나오고 있지 않은 상태이다. 이렇다면 다음 제공할 문서가 무엇인지 여전히 불명확한 상태이다.

• 해당 부분을 추가적으로 수정하는 것이 좋을 것 같다. 따로 적어두지 않는 이상 많은 스크롤을 요하고 있다.

• 6개의 모든 문서를 제공하였으나 답변할 것을 요청하지 않고 있다.
  • 다음 단계라던가..

• 취소선이 뭔가 쎄하다...
  • 역시 쎄한건 무시 못한다.

• 이 게임에서 Branch는 분기를 관리하는 곳이다.

• 이 부분 출력을 시원하게 무시하더니 하나도 안맞고 있다.
• 대사는 총 540개가 들어가야 한다.

• 개판이다. 이 모델은 쓰면 안될 것 같다. 다른 모델로 시도한다.

---

3) 3차 채팅 - o3-mini-high 1차

• 4o가 아닌 o3-mini-high로 시도한 이유는 코딩과 로직에 탁월하다고 하기 때문이다.
• 어찌 되었던 CSV 데이터를 쓸 때 코드블록으로 작성하기도 하고 4.5의 경우나 캔버스 이용 시 파이썬으로 적고 있기도 했다.

• 그냥 문서만 던지면 안되나보다.

• 6개를 전부 제공했으나 다음 것을 요하지 않고 있다.

• 이전 o3-mini 모델과 같다 지가 다 학습했으면 알아서 산출해야 하는데 변함이 없다.

• o3-mini나 크게 다르지 않다. 거의 단어만 살짝 다를 뿐. prompt를 수정하는 방향으로 가야될 것 같다.

---