본문으로 이동geul.io

딥시크 V4.1 Flash 1017 코드 품질, Opus 5.5와 GPT-6.1 Sol 비교

올린이 geul날짜 조회 0
  • DeepSeek V4.1 Flash 1017(딥시크 V4.1 플래시 1017)은 DeepSeek가 10월 17일 내놓은 모델 업데이트임

  • 값은 Opus 5.5의 15분의 1 안팎이지만, 코드 품질은 Opus 5.5와 GPT-6.1 Sol보다 아래로 나옴

  • 각 회사가 발표한 코딩 점수로는 셋 중 1위, 사람이 결과물을 보고 고른 순위로는 12위임

  • 버그와 보안 취약점을 센 자료는 아직 없음 (10월 19일 확인)

코드 품질, Opus 5.5와 GPT-6.1 Sol 비교

누가 쟀느냐에 따라 순위가 뒤집힘.

  • 각 회사가 발표한 코딩 점수: DeepSeek 77.0, GPT-6.1 Sol 75.2, Opus 5.5 74.2

    • 회사마다 재는 방식이 달라 그대로 견주긴 어려움

  • 사람 투표 순위(Code Arena): Opus 5.5 1위, GPT-6.1 Sol 4위, DeepSeek 12위

    • 같은 요청을 두 모델에 맡기고, 사람이 더 나은 결과를 고르는 방식임

    • 오픈 모델 가운데서는 1위

  • 제3자가 잰 터미널 작업 점수: Opus 5.5 59.6, GPT-6.1 Sol 56.1, DeepSeek 26.8

    • DeepSeek는 9월판 점수이고, 1017판은 아직 안 잼

  • 짧은 문제는 차이가 없음. Kingy AI 시험에서 DeepSeek, GPT-6.1 Sol, Sonnet 5.5 모두 14문제를 다 맞힘

버그와 보안 취약점은

  • DeepSeek는 아직 잰 곳이 없음

  • 코드 검사 회사 Sonar가 잰 다른 두 모델 (Java 코드 1천 줄당 문제 수, 적을수록 좋음)

    • Opus 5.5: 16.5개

    • GPT-6.1 Sol: 19.4개

  • Opus 5.5는 읽고 고치기 쉬운 코드를, GPT-6.1 Sol은 버그와 보안 취약점이 적은 코드를 씀

  • 회사 코드에 쓰려면 자기 저장소에서 직접 검사해 보는 게 가장 확실함

써 본 개발자 반응

Hacker News에서 942점, 댓글 706개를 받음 (10월 19일 확인).

  • 좋다는 쪽

    • 개발자가 직접 짤 법한 코드를 쓴다는 평이 많음

    • 일의 90%를 DeepSeek에 맡긴다는 사람도 있음

  • 아쉽다는 쪽

    • 3D, 디자인 같은 일은 약하다는 의견

    • 겉보기엔 그럴듯한데 속 로직이 틀린 코드를 냈다는 시험 결과도 있음 (MindStudio, 9월판)

가격 (100만 토큰당)

  • 입력: DeepSeek $0.30, GPT-6.1 Sol $2, Opus 5.5 $4

  • 출력: DeepSeek $1.20, GPT-6.1 Sol $10, Opus 5.5 $20

  • 평일 한국 시간 10~13시, 15~19시가 아니면 DeepSeek는 절반 값임

  • 실제 과제 하나 비용은 차이가 이보다 작음. 9월판이 답을 길게 써서임

    • Artificial Analysis 평가 과제 1건당: DeepSeek $0.49, GPT-6.1 Sol $0.72, Opus 5.5 $5.98 (최고 설정)

    • 1017판은 답을 짧게 줄였다고 해서 더 싸질 수 있음

Claude Code에서 쓰는 법

  • DeepSeek 플랫폼(platform.deepseek.com)에서 API 키를 만듦

  • 아래 설정을 넣고 claude를 실행함 (DeepSeek 공식 안내)

export ANTHROPIC_BASE_URL=https://api.deepseek.com/anthropic
export ANTHROPIC_AUTH_TOKEN=<DeepSeek API 키>
export ANTHROPIC_MODEL=deepseek-flash[1m]
export ANTHROPIC_DEFAULT_OPUS_MODEL=deepseek-flash[1m]
export ANTHROPIC_DEFAULT_SONNET_MODEL=deepseek-flash[1m]
export ANTHROPIC_DEFAULT_HAIKU_MODEL=deepseek-flash
export CLAUDE_CODE_SUBAGENT_MODEL=deepseek-flash
export CLAUDE_CODE_EFFORT_LEVEL=max
export CLAUDE_CODE_AUTO_COMPACT_WINDOW=786432
  • Opus 자리까지 deepseek-flash로 채워야 함. 비워 두면 더 비싼 이전 모델로 감

  • PDF 첨부는 안 됨

주의할 점

  • DeepSeek 서버는 중국에 있음. 회사 코드는 사내 규정부터 확인하는 게 좋음

  • 기존에 deepseek-flash로 쓰던 코드는 그대로 두면 1017판이 답함

좋아요저장

댓글

로그인 후 댓글을 남길 수 있습니다.

아직 댓글이 없습니다.