· 톺아보기

GPT SOL Ultra에게 일을 시켜도 멍청한 짓을 하네요

백반이 · · 수정

조회 3,528 · 공감 0 · 댓글 9

나름 현존 GPT 최상 모델에 멀티 에이전트까지 동원하는 최고가 모델에 방식인데,


고객 입력 필드에 추가 요청사항 넣고 줄바꿈도 가능하게 하고 길이도 여러 내용이 들어갈 수 있으니 넉넉히 지정하라 했습니다.


근데 고객 입력 화면에 저런 문구를 직접 넣을 필요는 없잖습니까. 조금만 생각해 보면 아는 내용인데 참 한 번씩 더 수정 요청해야 하고 아직 갈길이 멀었네요.


지난번에도 비슷하게 고객 표시 화면에 쓸데없는 가격 관련 내용이나 개발 상의 코멘트를 남기길래 주의를 줬는데 이건 안 고쳐지나 봅니다.

GPT SOL Ultra에게 일을 시켜도 멍청한 짓을 하네요 이미지 1

댓글 9

  1. 초랭이2 ·
    high로 일시켜보고 잘하면 xhigh로 올리고.
    정말 어려운 고난도의 문제해결에 max 사용하라고 권고하더군요.
    쉬운일에 max 나 ultra를 돌리면 과잉작업(삽질)확률이 올라갑니다.. 클로드는 max 돌려도 시간이 오래걸릴뿐 결과물은 좋던데 gpt는 max 돌리니 잘못작업하는경우가 있는것 같습니다...
  2. 백반이 ·
    @초랭이2님 글쿤요. 감사합니다. ㅠ
  3. 유스튜 ·
    Ultra는 에이전트를 여러개 만들어 검증하더라구요.
    보통은 terra high로 작업하고 설계할때만 sol을 씁니다. 테라로도 충분하더라구요
  4. 러브앤팝 ·
    더 잘 해보려는 신입의 과욕이라 생각하고 더 자세한 설명을 안해준 저를 탓합니다, 다시 시키면 되니까
  5. 야근싫다 ·
    AI의 흔한 실수 중 하나이죠. 안티패턴으로 정의해서 스킬로 만드시면 많이 줄어들겁니다.
  6. 하트브레이커 · · 공감 1
    저게 일반적인 UI 패턴이라 그럴 수 있습니다. 어찌됐던 LLM 은 확률계산기라 학습이 다니까요.
  7. AppleJam ·
    추론 수준을 너무 높이면 과추론 문제가 있고 UI 설계를 맡기면 쓸데없이 이상한 문구를 집어넣는 현상은 GPT의 유서 깊은 전통입니다. 그래서 UI는 다른 모델에 맡기시는 것이 좋습니다.
  8. shine7 ·
    본문과는 상관없을 수 있지만
    제 경험상 제일 높은 사양의 모델을 써도 환각현상은 크게 상관없는것 같더라구요.
  9. 커피칼디 ·
    수단이 많지 않고 명확한 방법을 요구한다면
    보통 높은 모델이 더 빡세게 길을 돌아갑니다.
    그게 창조적인 해결책을 찾는 최적 행동이죠.
    주어진 여유가 많아서겠죠.
    실제로 생각 보면 기대가 이게 아닐거다 하면서 내면에서 프롬프트보다 더 해내라고 다그치는 듯 합니다.

    그래서 세 가지로 나눠 출시해준 거 잘 써먹고 있습니다. 디자인은 아니라 다르겠지만 체감 80% 이상의 작업은 루나로 충분합니다.

    요즘 추세가 하네스를 줄이라는 건데 고급 모델은 하네스 없이 스스로 생각해서 더 잘하려고 하기 때문이겠죠.

모두의공원 최근 글

모두의공원 목록 더 보기