Claude vs ChatGPT

오늘 (운영 미숙함이 많았던 ㅠㅠ) Linus와의 웨비나를 준비하는 과정에서 사전 질문을 뽑아내고 Demographic을 파악해보기 위해 Claude와 ChatGPT를 사용했는데요, Claude와 ChatGPT 아웃풋의 퀄리티 차이가 확실히 많이 느껴지는 것 같아요.

둘다한테 참가자분들의 직무와 질문들이 담긴 csv파일을 준 후 분석을 요청했는데 ChatGPT는 단어가 모호한 경우는 직무 분류를 잘 못하고 대부분 Other 항목으로 분류해주고 질문을 분류해달라는 요청도 단어를 기반으로 분류를 했어요.

반면 Claude는 제가공이 필요 없을 정도로 직업과 질문 분류를 잘해주네요. 심지어 질문에서는 세부 항목까지 나눠서 답변을 해줬어요.

Claude를 쓰면서 Chat형 LLM 어플리케이션의 좋은 경험에 1)모델 아웃풋 2)Inference 속도 3)LLM 아웃풋을 쉽게 조작하고 버저닝 할 수 있는 인터페이스가 중요하다는 생각도 했습니다. Claude는 우측에 생성된 결과물들을 띄울 수가 있고 이전 버전들도 보기 편하게 해주는 Chat Control 패널이 있는데 이게 있는 것과 없는 것이 경험 측면에서 차이가 큰 것 같아요. Replit도 비슷한 구조인데 다이나믹하게 UI를 생성하는게 더 발전되고 활성화 되면 이런 인터페이스가 더 다양한 방식으로 정보를 조작할 수 있게 해줄 것 같다는 생각이 들었어요.

디스콰이엇에도 클로드의 Chat Control 처럼 바로 코드를 올리건 Figma UI를 제공하건 하는 형태로 메이커들이 좀 더 빠르게 자신이 생각한 기능을 사람들에게 인터렉티브한 형태로 보여주고 피드백을 받을 수 있게 해보는 것도 재미있을 것 같다는 생각이 드네요.