목차
장면 1: 인터뷰 질문
시나리오 2: 영어 이메일
응용 프로그램 작업 3: 라이브 방송 지원
기술 주변기기 일체 포함 인터뷰, 영어 이메일, 라이브 방송, 주간 보고서, 이력서 등 5가지 시나리오에서 GPT 3.5 시리즈 모델은 얼마나 비용 효율적인가요? 우리는 실제 테스트를 수행하고 선택 가이드를 제공했습니다.

인터뷰, 영어 이메일, 라이브 방송, 주간 보고서, 이력서 등 5가지 시나리오에서 GPT 3.5 시리즈 모델은 얼마나 비용 효율적인가요? 우리는 실제 테스트를 수행하고 선택 가이드를 제공했습니다.

May 08, 2023 pm 07:43 PM
모델 실제 측정

GPT 3.5 시리즈에서 어떤 모델이 가장 성능이 좋나요?

GPT 3.5 시리즈는 일반적인 애플리케이션 작업에서 실제로 어떻게 작동합니까?

GPT 3.5 모델이 다양한 질문에 답하는 데 일반적으로 비용이 얼마나 드나요?

이번 호 "SOTA! 실측"

이번 호의 실측 결과에 대한 결론은 다음과 같습니다. (자세한 평점은 기사 끝 부분을 참고하세요)


모델

gpt-3.5-turbo

text-davinci-003

text-davinci-002

Instructions

현재 가장 강력한 GPT-3.5 모델로 채팅 시나리오에 특별히 최적화되어 있으며 가격은 text-davinci-003의 10분의 1 수준입니다.

Curie, Babbage 또는 Ada 모델보다 더 나은 품질, 더 긴 출력으로 모든 언어 작업을 완료할 수 있으며 지침을 더 잘 따릅니다.

text-davinci-003과 유사한 기능을 가지고 있지만 강화 학습이 아닌 감독 미세 조정을 통해 훈련되며 최대 토큰 수는 4097개입니다.

최대 토큰 수

4,096개 토큰

4,097개 토큰

4,097개 토큰

가격

$0.002 / 1K 토큰

$0.0200 / 1K 토큰

$0.0200 / 1K 토큰

전체 평점

전체 점수가 높아 높은 정확성과 전문성을 보여주며 대부분의 작업에 적응할 수 있으며, 다양한 작업에 대한 출력도 비교적 정확하고 포괄적입니다. 강력한 적응성과 다양성, 최저 비용.

전체 점수가 상대적으로 낮습니다. 일부 작업에서는 잘 수행되지만 전반적인 출력 결과는 개인화 및 적절성이 부족하고 표현이 정확하지 않고 간결하지 않으며 때로는 부정확한 경우도 있습니다.

전체 점수가 가장 낮습니다. 출력 결과가 전문적이고 정확하지 않습니다. 언어 표현에도 큰 문제가 있습니다.

면접 질문 시나리오 과제에서 gpt-3.5-turbo는 전체 점수가 가장 높으며 면접 시나리오에 잘 적응할 수 있습니다. 생성된 질문은 고도로 타겟팅되어 있으며 후보자의 능력과 경험에 대한 심층적인 이해를 제공합니다. 여러 각도; text-davinci-002는 질문이 너무 광범위하고 기본적으로 직무 설명이 반복되어 도전성과 실용성이 부족하고 심지어 완전히 사용할 수 없는 콘텐츠를 생성하여 가장 낮은 등급을 받았습니다.

영어 이메일 작성 시나리오 과제에서는 gpt-3.5-turbo와 text-davinci-003이 종합 점수가 더 높고, 구어체와 격식을 갖춘 문체 언어 스타일을 시뮬레이션할 수 있으며, 구어체 표현에 적합하고 모호성이 좋습니다. 명사에 대한 이해 및 번역은 가능하지만 안전하지 않은 콘텐츠를 정확하게 식별할 수 없는 반면 text-davinci-002는 가장 낮은 점수를 받았으며 음성 언어와 서면 언어를 잘 전환할 수 없으며 안전하지 않은 콘텐츠를 올바르게 식별할 수 없습니다.

생방송 장면 작업에서는 gpt-3.5-turbo가 가장 높은 점수를 얻었으며 이는 라이브 콘텐츠를 정확하고 간결하며 유창하게 요약할 수 있으며 단순성 요구 사항을 충족하는 반면 text-davinci-002는 가장 낮습니다. Score 의 경우 출력 정확도가 평균 수준이고 장면에 잘 적응할 수 없지만 단순성과 유창성 측면에서 추가 개선의 여지가 있습니다.

주간 보고서 시나리오 작업에서는 gpt-3.5-turbo와 text-davinci-003의 점수가 더 높고 주간 보고서의 논리적 구조와 내용 포인트를 정확하게 표현할 수 있으며 출력 내용도 비교적 완성도가 높습니다. text-davinci -002 가 가장 낮은 점수를 받았으나 주간 보고서를 표현하기 위한 논리가 부족하고 구조도 일치하지 않으며 내용도 관련이 없습니다.

이력서 시나리오 작업에서 gpt-3.5-turbo는 채용 담당자의 요구 사항을 충족하고 교육 배경, 업무 경험, 기술 숙달 및 자기 평가를 제시하는 이력서를 전문적으로 생성할 수 있습니다. 하지만 text-davinci-003과 text-davinci-002는 점수가 낮고, 성취도에 대한 개인화 및 정량적 설명이 부족하고, 이력서 설명도 부족하여 언어 표현의 정확성과 개인화에 더 많은 관심이 필요합니다. 비교적 단순하고 체계적이지 않습니다.

장면 1: 인터뷰 질문

테스트 시나리오

테스트 각도

직무 설명을 바탕으로 면접 질문 생성

면접 질문 생성 용이성

직업 설명과 얼마나 잘 생성된 면접 질문이 일치하는지

지원자 정보를 기반으로 면접 질문 생성

면접 질문 생성 용이성

면접 생성 질문과 그것이 후보자와 얼마나 잘 일치하는지

gpt-3.5-turbo 모델에서 생성된 면접 질문은 직무 설명의 주요 책임과 요구 사항을 다루고 면접 시나리오에 맞게 조정됩니다. 질문은 직무 경험, 프로젝트 경험, 기술 및 개인 특성 등을 포함하여 다양한 각도에서 후보자의 능력과 경험을 심층적으로 이해할 수 있도록 하며, 매우 타깃이 높습니다. 질문은 실용적인 가치가 있고, 직위에 잘 부합하며, 후보자의 능력을 효과적으로 평가할 수 있습니다.

text-davinci-003 모델에서 생성된 면접 질문은 직무 설명에 언급된 여러 요구 사항과 기술을 다루지만 일부 질문은 구체적이지 않고 불분명합니다. 영역을 더욱 세분화해야 합니다. 그렇지 않으면 후보자의 능력을 완전히 측정할 수 없습니다. 모델에 의해 생성된 질문은 후보자의 직업적 배경, 프로젝트 경험, 기술 및 개인적 자질을 다루지만 일부 질문은 후보자의 능력을 더 잘 평가하기 위해 더 구체적이고 심층적일 수 있습니다.

text-davinci-002 모델에서 생성된 면접 질문은 주로 직무 요구 사항에 초점을 맞추고 있지만 이러한 질문은 너무 광범위하고 기본적으로 후보자와 직무 간의 일치 정도에 신경 쓰지 않고 직무 설명을 반복합니다. 설명보다 더 까다롭고 실용적인 질문은 할 수 없으며, 출력된 콘텐츠를 완전히 사용할 수 없는 상황도 있을 수 있습니다. 성공적인 질문 생성의 경우 모델에서 생성된 질문은 후보자의 전문적 배경, 프로젝트 경험 및 기술을 다루지만 일부 질문은 후보자의 능력을 더 잘 평가하기 위해 더 구체적이고 심층적일 수 있습니다.

테스트 사례 중 하나를 선택하여 살펴봅니다. -

모델 소비

gpt-3.5-turbo는 약 0.017위안을 소비합니다. 다빈치 -003 약 0.22위안, text-davinci-002는 약 0.19위안입니다.

추론 결과

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

생성된 면접 질문의 난이도와 타당성을 살펴보면, gpt-3.5-tur bo 모델의 출력은 다음과 같습니다. 최고, 직위의 요구 사항에 대해 여러 가지 구체적인 질문을 제기하며 이러한 질문도 매우 어렵고 목표가 정해져 있어 후보자의 능력과 경험을 효과적으로 테스트할 수 있습니다. text-davinci-002 모델의 출력은 가장 단순하거나 완전히 사용할 수 없으며 인터뷰 질문으로 간주될 수 없습니다. text-davinci-003 모델의 출력은 둘 사이에 있습니다. 제기된 질문은 gpt-3.5-turbo 모델보다 간단하지만, text-davinci-002 모델보다 더 구체적입니다.

면접 질문이 직무 설명과 얼마나 잘 일치하는지 측면에서 gpt-3.5-turbo 모델의 출력이 직무 설명에 가장 적합하다는 점과 직위 및 대상의 요구 사항에 대한 포괄적이고 상세한 분석을 수행합니다. 이러한 요구 사항에 해당하는 질문이 제기되었습니다. text-davinci-003 모델의 출력도 이 직위의 요구 사항을 반영하지만 질문의 수와 범위는 상대적으로 적습니다. 그리고 text-davinci-002는 이해할 수 없다고 할 수 있습니다.

시나리오 2: 영어 이메일

테스트 시나리오

테스트 각도

입력 텍스트, 전문 용어에 특수 번역이 포함된 고유 명사 삽입 특정 수직 분야에서 다양한 시나리오에서 다양한 의미를 갖는 명사

의미가 원활한지, 확장된 내용이 맞는지, 모호명사의 번역이 맞는지, 전문명사/고유명사의 번역이 맞는지

입력에 " 구어체"가 필요합니다. "글로 쓴" 출력

음성 또는 형식적인 문어 스타일을 시뮬레이션할 수 있습니까?

입력에 구어체 톤으로 쓰고, "글로 쓴" 출력이 필요합니까? 일부 배경 정보를 생략하고 모호한 명사를 입력에 사용하여 구어체 표현이나 모호한 명사를 올바르게 번역할 수 있는지 여부

범죄와 함께- 입력된 관련 콘텐츠

안전하지 않은 콘텐츠는 필터링되나요? 생략된 문장

을 필터링하여 중국어의 문법 오류, 오타, 불완전한 문장을 올바르게 이해할 수 있나요

gpt-3.5-turbo: 총점은 3.3점입니다. 이메일 구조가 장면에 맞고, 어조도 정확하고, 학명의 고유명사는 기본적으로 약어를 사용하지 않는 이상 좋습니다. 구어체 입력에 대한 강한 감정. 오타 및 문법 오류와 같은 입력 문제를 올바르게 수정할 수 있는 단점은 안전하지 않은 콘텐츠를 정확하게 식별하지 못한다는 것입니다.

text-davinci-003 : 종합점수 3점, 구조가 공통템플릿을 사용하고, 제목이 없고, 문장 연결이 뭉툭하고, 확장이 부족하고, 고유명사와 모호한 명사가 정확하게 이해되고, 구어적 이해와 발생률이 예상보다 높아 안전하지 않은 콘텐츠를 제대로 식별하지 못합니다.

text-davinci-002: 종합점수 2점, 구조가 공통템플릿을 사용하고, 제목이 없고, 문장이 매끄럽지 않거나 심지어 틀리지도 않고, 단락 구조가 명확하지 않고, 확장이 없습니다. , 학명의 고유명사가 기본이 아닌 이상 약어를 기재하여 말과 글의 언어 전환이 잘 되지 않고, 안전하지 않은 내용을 정확하게 식별하지 못한다.

테스트 사례 중 하나를 선택하여 살펴봅니다. 특수 번역이 있는 고유명사, 특정 분야의 전문 용어, 시나리오에 따라 의미가 다른 명사를 입력 텍스트에 삽입합니다. 예제에는 다음과 같은 입력이 있습니다

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

모델 소비

특수 번역이 포함된 고유명사, 특정 수직 분야의 전문 용어, 다양한 시나리오에서 다양한 의미를 갖는 명사 테스트를 입력 텍스트에 삽입합니다. 예를 들어 gpt-3.5-turbo는 약 0.006위안, text-davinci-003은 약 0.067위안, text-davinci-002는 약 0.07위안을 소비합니다

추론 성능

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

의미적 부드러움 측면에서 세 가지 모델 모두 뚜렷한 언어 문제나 문법 오류 없이 비교적 잘 수행되었습니다. 확장된 내용이 올바른지 여부에 대해 gpt-3.5-turbo 및 text-davinci-003의 응답은 비교적 포괄적이며 각 질문에 대한 자세한 답변을 제공하고 관련 제안 및 제품 권장 사항을 제공합니다. Text-davinci-002는 몇 가지 질문에만 답변했을 뿐 관련 세부정보와 제안 사항을 많이 제공하지 않았습니다.

모호명사 번역이 맞는지, 전문명사/고유명사 번역이 맞는지에서는 세 모델의 성능이 비교적 좋은 편입니다. gpt-3.5-turbo 및 text-davinci-003, text-davinci-002는 모두 올바른 영어 용어를 사용하여 폴리테트라플루오로에틸렌(PTFE)과 과불화 화합물(PFC)을 올바르게 번역합니다.

응용 프로그램 작업 3: 라이브 방송 지원

생방송 테마를 바탕으로 생방송 개요 작성생성된 생방송 개요의 주제와의 관련성생방송의 텍스트 내용을 바탕으로 질문에 대한 답변을 알아보세요생성된 답변의 정확성

gpt-3.5-turbo: 총점은 4.4점입니다. 모델이 사용자가 제시한 요구 사항을 정확하고 정밀하게 구현하고, 입력 내용을 출력 콘텐츠에 반영하고, 테마와 장면에 맞고, 정확하게 표현되며, 원본 정보를 생략하거나 왜곡하지 않고, 질문에 대한 답변을 간결하게 구성할 수 있고, 요구사항의 단순성 요구 사항을 준수하며, 원활하게 출력하고, 간결하고 명확한 문장 구조와 명확한 표현을 가질 수 있습니다.

text-davinci-003: 전체 점수는 4.2점입니다. 모델 요약 정확도가 높고 생성된 콘텐츠가 장면의 요구 사항을 충족하며 누락된 정보가 없고 불필요한 정보가 추가되지 않습니다. 언어 유창성도 좋습니다. 내용 유창성과 간결성에 대한 요구 사항을 충족합니다. 하지만, 더 정교하고 단순화된 언어가 필요한 반면, 생성된 콘텐츠는 추가적인 분석과 통찰력을 제공하지 않으며 더 많은 폭과 깊이를 요구합니다.

text-davinci-002: 전체 점수는 1.5점입니다. 모델 출력 정확도는 평균이며 일부 기본 적용 범위 문제 점은 대부분 장면에 잘 적응하지 못하며 생성된 문장 구조는 상대적으로 복잡하고 단어의 중복이 분명하고 언어 표현이 약간 딱딱하여 독자의 텍스트 이해와 읽기 유창성에 영향을 미칠 수 있습니다.

살펴보기 위해 테스트 사례 중 하나를 선택합시다 -

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

코스트 소비

라이브 방송 테마, GPT를 기반으로 라이브 방송 개요 테스트를 작성하십시오. -3.5- 터보는 0.01위안 정도 소모, text-davinci-003은 0.11위안 정도 소모, text-davinci-002는 0.071위안 정도 소모

추론 결과

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

gpt -3.5- 터보의 출력은 다른 두 모델보다 테마 요구 사항에 더 부합하며 AIGC 기술과 콘텐츠 산업의 결합, 성공 사례 및 향후 개발 방향 등을 포함하여 개요 콘텐츠도 더 풍부하고 포괄적입니다. .전체적인 품질이 더 높습니다.

text-davinci-003의 출력물도 어느 정도 활용 가능하지만, 주로 AIGC와 그 역사, 개요에 언급된 콘텐츠 산업의 진출 방법을 소개한 후 주제와의 관련성이 약간 부족합니다. AIGC의 관문, 미래 등의 내용은 주제와 밀접한 관련이 없으며 상대적으로 일반적인 내용입니다.

text-davinci-002의 출력은 테마 요구 사항과 상당히 다릅니다. 콘텐츠 제작 회사로서 AIGC에 대한 개요를 언급하고 있지만 개요 내용은 회사 소개에 가깝고 이는 직접적으로 관련이 없습니다. 주제와 개요의 실제적 중요성이 부족합니다.

장면 4: 작업 주간 보고서

테스트 시나리오

테스트 각도

라이브 텍스트 콘텐츠를 바탕으로 요약으로 요약

생성된 콘텐츠 요약의 정확성, 정교함 및 유창함

라이브 텍스트 콘텐츠를 기반으로 여러 핵심 사항 구체화

핵심 사항의 정확성, 정교함 및 정교함 생성된 콘텐츠, 언어의 유창함

테스트 시나리오

검사 각도

주어진 작업 내용을 바탕으로 주간 보고서를 출력합니다

연마능력, 확장능력, 출력컨텐츠의 완성도와 완성도를 고려하세요

주어진 대략적인 설명을 바탕으로 주간리포트를 출력하세요

님의 의견을 고려하세요. 다양한 직업의 사람들 거친 업무 내용으로 출력되는 주간 보고서의 퀄리티

주어진 업무 내용과 대상 템플릿 구조를 바탕으로 템플릿화된 주간 보고서를 출력합니다

주간 보고서 출력을 고려해보세요 알려진 사양에 따라

이번 주 작업 내용을 바탕으로 다음 주 주간 작업 보고서를 출력

예측 능력을 고려

gpt-3.5-turbo: 종합점수는 3.4점 작업내용은 제목, 시간, 이번주의 작업요약, 다음주의 작업계획으로 표현되는 비교적 표준적인 주간 보고서 형식으로 제시됩니다. , 요약 템플릿은 일부 주요 업무, 업무 책임 등을 통해 더 깊고 자세한 콘텐츠와 연관될 수 있습니다. 전반적으로 출력 콘텐츠는 명확한 구조와 명확한 논리적 수준으로 상대적으로 완전합니다.

text-davinci-003: 총점은 3.1점, 주어진 내용을 문단 형태로 표현하고, 요구사항을 보다 완벽하게 완성할 수 있으며, 작품의 일부를 통합할 수 있음 동일한 속성을 가진 콘텐츠에는 논리, 명확한 수준 및 특정 실용성이 있습니다. 그러나 현장 적응력이 부족하고 경우에 따라 확장성이 부족하며 구조가 명확하지 않고 구성력이 부족합니다.

text-davinci-002: 총점은 1.5점, 입력 내용 시나리오를 정확하게 이해할 수 없음, 출력 내용이 주간 보고서의 주제와 논리를 표현하지 못함, 구조가 일치하지 않음, 콘텐츠가 적절하지 않습니다. 프로세스 설명이 있습니다. 아니요 입력 콘텐츠를 직접 번역하고 마지막 답변을 다시 말하더라도 확장 기능이 없어 모델 성능이 저하됩니다.

테스트 케이스 중 하나를 선택하여 살펴봅니다. -

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

소비 비용

을 기준으로 주간 보고서 테스트 케이스를 출력합니다. 대략적인 설명 제공 , gpt-3.5-turbo는 약 0.0065위안, text-davinci-003은 약 0.094위안, text-davinci-002는 약 0.072위안을 소비합니다

추론 결과

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

이 작업의 경우 세 가지 모델의 출력 품질이 상대적으로 좋고 모두 이번 주의 주요 작업 내용을 다루지만 약간의 미묘한 차이가 있습니다.

gpt-3.5-turbo의 출력은 상대적으로 더 자세하여 설계 프로세스, 인터페이스, 채점 기준 등 각 작업의 세부 사항을 나열하고 주간 보고서 독자가 다음 단계 계획을 제안할 수도 있습니다. 더 많은 정보를 이해하세요.

text-davinci-003의 출력도 일부 자세한 정보를 제공하지만 평가 시스템의 데이터 소스, 평가 항목, 평가 방법 등을 포함한 기술적 세부 사항에 더 중점을 둡니다. 이번 주간 보고서는 다음 사항에 더 중점을 둡니다. 기술 수준 설명.

text-davinci-002의 출력은 더 간결하고 명확하지만 덜 명확하지는 않습니다. 세부 사항에 대한 설명은 줄이고 프로젝트와 작업의 일반적인 방향에 중점을 둡니다.

일반적으로 세 가지 모델의 출력은 작업 요구 사항을 충족할 수 있지만 gpt-3.5-turbo 및 text-davinci-003의 출력이 더 자세하고 자세한 내용과 기술 수준 정보를 제공합니다. 보다 포괄적인 주간 보고서가 필요한 경우 이 두 가지 모델을 선택할 수 있습니다. text-davinci-002의 출력은 더욱 간결하고 명확하여 짧지만 명확한 주간 보고서가 필요한 사람들에게 적합합니다.

장면 5: Resume

테스트 시나리오

검사 각도

직무에 따른 이력서 생성

직무와 생성된 이력서 간의 매칭 및 전문성

직업 요구 사항에 따라 이력서 생성

직업 요건과 이력서의 일치

자기 소개를 기반으로 이력서 생성

생성된 콘텐츠의 정확성과 전문성

에 따르면 직위 이력서 템플릿 생성

템플릿 전문성 및 매칭 학위 생성

gpt-3.5-turbo: 종합 점수 4점, 높은 전문성, 템플릿 출력 작업 요구 사항의 모든 측면을 다루고 있으며 내용이 정확하며 해당 경험의 능력과 특성을 구체적으로 제시합니다. 직무 요구 사항은 독자에게 명확하고 채용 담당자의 요구 사항을 보다 쉽게 ​​충족할 수 있도록 하며, 교육 배경부터 업무 경험, 기술 숙달 및 자기 평가까지 모든 것을 포괄하는 템플릿에 의한 정보 출력이 완전합니다. , 이는 채용 담당자에게 포괄적인 이해를 제공할 수 있습니다. 그러나 개인화가 부족하고, 표현형태가 단조롭고, 언어 표현에 사용되는 단어에 대한 고려가 필요하다.

text-davinci-003: 총점은 1.9점이며, 구체적인 프로젝트 사례 및 결과 표시가 부족합니다. 채용 공고에 대한 개별 설명이 없습니다. 이력서에는 채용 요건을 충족하는 여러 조건이 언급되어 있지만 채용 직위의 특성과 요구 사항을 구체적으로 설명하고 강조하지는 않았습니다. 결과에 대한 정량적 설명이 부족합니다. 언어 표현이 간결하고 정확하지 않습니다.

text-davinci-002: 종합점수는 1.3점입니다. 표준이력서에 맞는 기본정보 요구사항이 너무 부족합니다. 명확한 구직 목표, 개인화 및 타당성 부족, 정량적 지표 부족, 경험 및 기술에 대한 상대적으로 간단한 설명, 상대적으로 단순한 형식, 사양 준수 및 열악한 모델 성능.

테스트 사례 중 하나를 선택하여 살펴봅니다. -

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

소비 비용

직위 , gpt-3 .5- 터보는 약 0.0077위안을 소모하고, text-davinci-003은 약 0.1위안을 소모하고, text-davinci-002는 약 0.022위안을 소모합니다

추론 출력

实测 | GPT 3.5系列模型选择指南:面试、英文邮件、直播、周报、简历5个场景下性价比如何?

생성되고 있는 템플릿 전문성과 매칭 측면에서 gpt-3.5-turbo와 text-davinci-003 모두 개인 정보, 학력, 업무 경험 등 핵심 요소를 포함하여 비교적 완전한 이력서 템플릿을 제공할 수 있음을 알 수 있습니다. 전문적인 기술과 자기평가 등의 형식으로 되어 있으며 상대적으로 표준화되어 있습니다.

하지만 잘 살펴보면 text-davinci-003은 직무 요구 사항과 개인 능력의 일치를 구체적으로 설명하지 않습니다. 컴퓨터조작, CET-6에 익숙하지만 군고구마 판매직에 대한 전문적인 기술과 지식이 부족합니다. Text-davinci-002는 비교적 간략하며 지원자의 목표, 기술, 경험, 학력 등 기본적인 정보만 제공합니다.

GPT 3.5 시리즈 3개 모델 비교 요약

인터뷰 시나리오 과제에서는 gpt-3.5-turbo가 전체 점수가 가장 높으며 인터뷰 시나리오에 잘 적응할 수 있습니다. 다양한 각도에서 후보자의 능력과 경험을 이해합니다. text-davinci-002는 가장 낮은 평가를 받았지만 질문은 너무 광범위하고 기본적으로 직무 설명을 반복했으며 도전적이고 실용적인 질문이 부족했으며 심지어 전혀 사용할 수 없는 콘텐츠도 생성되었습니다.

영어 이메일 작성 시나리오 과제에서 gpt-3.5-turbo와 text-davinci-003의 종합 점수가 상대적으로 높고, 구어체와 격식을 갖춘 문체 언어 스타일을 시뮬레이션할 수 있으며, 구어체 표현과 모호한 표현에 적합합니다. 명사에 대한 이해력과 번역 능력은 좋지만 안전하지 않은 콘텐츠를 올바르게 식별할 수 없습니다. text-davinci-002는 점수가 가장 낮고 음성 언어와 서면 언어를 잘 전환할 수 없으며 안전하지 않은 콘텐츠를 올바르게 식별할 수 없습니다.

생방송 장면 작업에서는 gpt-3.5-turbo가 가장 높은 점수를 얻었으며 이는 라이브 콘텐츠를 정확하고 간결하며 유창하게 요약할 수 있으며 단순성 요구 사항을 충족하는 반면 text-davinci-002는 가장 낮은 점수를 받았습니다. 출력 정확도는 평균 수준이고 장면에 잘 적응하지 못하지만 단순성과 유창성 측면에서 더 개선할 여지가 있습니다.

주간 업무 보고서 작성 시나리오 과제에서는 gpt-3.5-turbo와 text-davinci-003의 점수가 더 높고, 주간 보고서의 논리적 구조와 내용 포인트를 정확하게 제시할 수 있으며, 출력되는 내용이 상대적으로 text-davinci-002가 가장 낮은 점수를 받았으나 주간 보고서를 표현하기 위한 논리가 부족하고 구조가 일치하지 않으며 내용이 적절하지 않습니다.

이력서 시나리오 작업에서 gpt-3.5-turbo는 채용 담당자의 요구 사항을 충족하고 학력, 업무 경험, 기술 숙달 및 자기 평가에 대한 정보를 제시하는 이력서를 전문적으로 생성할 수 있습니다. 그러나 언어 표현의 정확성과 개인화에 더 많은 관심을 기울일 필요가 있습니다. text-davinci-003과 text-davinci-002는 점수가 낮고 성과에 대한 개인화 및 정량적 설명이 부족하며 이력서 설명도 상대적으로 단순하고 조직화되지 않은.

위 5가지 신청업무에 대한 종합평가는 다음과 같습니다. 다음 평가는 특정 애플리케이션 시나리오에서의 이러한 모델 평가만을 나타냅니다. 평가는 다른 애플리케이션 시나리오 또는 작업에 따라 다를 수 있습니다. 이러한 모델 중 일부는 아직 반복 과정에 있으며 더 나은 성능과 성능을 제공할 수 있습니다. 향후 테스트에서는 GPT 시리즈(예: GPT-4)의 새 모델에 대한 비교도 추가할 예정입니다.

응용 작업

테스트 시나리오

GPT-3.5 Turbo

text-davinci-003

text-davinci-002

종합평가 (총점 5점, 이하 동일)

3.8


3.2

1.7

면접 질문 만들기

직업 설명을 기반으로 면접 질문 생성

4.5

4

0

지원자 정보를 바탕으로 면접 질문 생성

4.5

3.75

3.5

이메일 쓰기

입력 텍스트 또는 특정 카테고리에 특수 번역이 포함된 고유 명사를 삽입하세요. field 전문 용어, 다양한 시나리오에서 다양한 의미를 갖는 명사

5

3

2

"구어체"를 사용해야 합니다. "작성된" 출력

3.5

3

3.5

은 입력 부분에서 생략됩니다. 기본 배경 정보, 사용 모호한 명사

4

5

2

은 범죄입니다.

1

1

1

입력 시 역문, 동음이의어 오타, 방언, 구어체 생략을 사용하세요

3

4

3

라이브 방송 요약

은 라이브 텍스트 내용을 기준으로 요약되어 있습니다

4

4

3

라이브 텍스트 콘텐츠를 기반으로 여러 핵심 포인트 추출

4.7

4

3

라이브 방송 주제에 맞춰 작성해 보세요

4

4

0

질문에 대한 답을 찾아보세요 라이브 텍스트 콘텐츠를 기반으로

5

5

0

주간 업무 보고서 작성

주어진 작업 내용을 바탕으로 주간 보고서를 출력합니다

4 4.5

4

3

주어진 업무 내용과 대상 템플릿 구조를 바탕으로 템플릿화된 주간 보고서를 출력합니다.

3

1

1

이번주 작업 내용을 바탕으로 다음주 주간 작업 보고서를 출력합니다

2

4

2

이력서 쓰기

직무에 따른 이력서 생성

4

1.5

1.5

생성 기반 직무 요구 사항에 따라 Resume

4.5

3

1.5

이력서 생성 -소개

3.5

1.5

1

직급에 따른 이력서 템플릿 생성

3.5

1.5

1

위 내용은 인터뷰, 영어 이메일, 라이브 방송, 주간 보고서, 이력서 등 5가지 시나리오에서 GPT 3.5 시리즈 모델은 얼마나 비용 효율적인가요? 우리는 실제 테스트를 수행하고 선택 가이드를 제공했습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.

핫 AI 도구

Undresser.AI Undress

Undresser.AI Undress

사실적인 누드 사진을 만들기 위한 AI 기반 앱

AI Clothes Remover

AI Clothes Remover

사진에서 옷을 제거하는 온라인 AI 도구입니다.

Undress AI Tool

Undress AI Tool

무료로 이미지를 벗다

Clothoff.io

Clothoff.io

AI 옷 제거제

AI Hentai Generator

AI Hentai Generator

AI Hentai를 무료로 생성하십시오.

인기 기사

R.E.P.O. 에너지 결정과 그들이하는 일 (노란색 크리스탈)
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 최고의 그래픽 설정
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O. 아무도들을 수없는 경우 오디오를 수정하는 방법
3 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌
WWE 2K25 : Myrise에서 모든 것을 잠금 해제하는 방법
4 몇 주 전 By 尊渡假赌尊渡假赌尊渡假赌

뜨거운 도구

메모장++7.3.1

메모장++7.3.1

사용하기 쉬운 무료 코드 편집기

SublimeText3 중국어 버전

SublimeText3 중국어 버전

중국어 버전, 사용하기 매우 쉽습니다.

스튜디오 13.0.1 보내기

스튜디오 13.0.1 보내기

강력한 PHP 통합 개발 환경

드림위버 CS6

드림위버 CS6

시각적 웹 개발 도구

SublimeText3 Mac 버전

SublimeText3 Mac 버전

신 수준의 코드 편집 소프트웨어(SublimeText3)

세계에서 가장 강력한 오픈 소스 MoE 모델이 여기에 있습니다. 중국의 기능은 GPT-4와 비슷하며 가격은 GPT-4-Turbo의 거의 1%에 불과합니다. 세계에서 가장 강력한 오픈 소스 MoE 모델이 여기에 있습니다. 중국의 기능은 GPT-4와 비슷하며 가격은 GPT-4-Turbo의 거의 1%에 불과합니다. May 07, 2024 pm 04:13 PM

기존 컴퓨팅을 능가할 뿐만 아니라 더 낮은 비용으로 더 효율적인 성능을 달성하는 인공 지능 모델을 상상해 보세요. 이것은 공상과학 소설이 아닙니다. DeepSeek-V2[1], 세계에서 가장 강력한 오픈 소스 MoE 모델이 여기에 있습니다. DeepSeek-V2는 경제적인 훈련과 효율적인 추론이라는 특징을 지닌 전문가(MoE) 언어 모델의 강력한 혼합입니다. 이는 236B 매개변수로 구성되며, 그 중 21B는 각 마커를 활성화하는 데 사용됩니다. DeepSeek67B와 비교하여 DeepSeek-V2는 더 강력한 성능을 제공하는 동시에 훈련 비용을 42.5% 절감하고 KV 캐시를 93.3% 줄이며 최대 생성 처리량을 5.76배로 늘립니다. DeepSeek은 일반 인공지능을 연구하는 회사입니다.

AI가 수학적 연구를 전복시킨다! 필즈상 수상자이자 중국계 미국인 수학자, Terence Tao가 좋아하는 11개 논문 발표 | AI가 수학적 연구를 전복시킨다! 필즈상 수상자이자 중국계 미국인 수학자, Terence Tao가 좋아하는 11개 논문 발표 | Apr 09, 2024 am 11:52 AM

AI는 실제로 수학을 변화시키고 있습니다. 최근 이 문제에 주목하고 있는 타오저쉬안(Tao Zhexuan)은 '미국수학회지(Bulletin of the American Mathematical Society)' 최신호를 게재했다. '기계가 수학을 바꿀 것인가?'라는 주제를 중심으로 많은 수학자들이 그들의 의견을 표현했습니다. 저자는 필즈상 수상자 Akshay Venkatesh, 중국 수학자 Zheng Lejun, 뉴욕대학교 컴퓨터 과학자 Ernest Davis 등 업계의 유명 학자들을 포함해 강력한 라인업을 보유하고 있습니다. AI의 세계는 극적으로 변했습니다. 이 기사 중 상당수는 1년 전에 제출되었습니다.

MLP를 대체하는 KAN은 오픈소스 프로젝트를 통해 컨볼루션으로 확장되었습니다. MLP를 대체하는 KAN은 오픈소스 프로젝트를 통해 컨볼루션으로 확장되었습니다. Jun 01, 2024 pm 10:03 PM

이달 초 MIT와 기타 기관의 연구자들은 MLP에 대한 매우 유망한 대안인 KAN을 제안했습니다. KAN은 정확성과 해석성 측면에서 MLP보다 뛰어납니다. 그리고 매우 적은 수의 매개변수로 더 많은 수의 매개변수를 사용하여 실행되는 MLP보다 성능이 뛰어날 수 있습니다. 예를 들어 저자는 KAN을 사용하여 더 작은 네트워크와 더 높은 수준의 자동화로 DeepMind의 결과를 재현했다고 밝혔습니다. 구체적으로 DeepMind의 MLP에는 약 300,000개의 매개변수가 있는 반면 KAN에는 약 200개의 매개변수만 있습니다. KAN은 MLP와 같이 강력한 수학적 기반을 가지고 있으며, KAN은 Kolmogorov-Arnold 표현 정리를 기반으로 합니다. 아래 그림과 같이 KAN은

안녕하세요, 일렉트릭 아틀라스입니다! 보스턴 다이나믹스 로봇 부활, 180도 이상한 움직임에 겁먹은 머스크 안녕하세요, 일렉트릭 아틀라스입니다! 보스턴 다이나믹스 로봇 부활, 180도 이상한 움직임에 겁먹은 머스크 Apr 18, 2024 pm 07:58 PM

Boston Dynamics Atlas가 공식적으로 전기 로봇 시대에 돌입했습니다! 어제 유압식 Atlas가 역사의 무대에서 "눈물을 흘리며" 물러났습니다. 오늘 Boston Dynamics는 전기식 Atlas가 작동 중이라고 발표했습니다. 상업용 휴머노이드 로봇 분야에서는 보스턴 다이내믹스가 테슬라와 경쟁하겠다는 각오를 다진 것으로 보인다. 새 영상은 공개된 지 10시간 만에 이미 100만 명이 넘는 조회수를 기록했다. 옛 사람들은 떠나고 새로운 역할이 등장하는 것은 역사적 필연이다. 올해가 휴머노이드 로봇의 폭발적인 해라는 것은 의심의 여지가 없습니다. 네티즌들은 “로봇의 발전으로 올해 개막식도 인간처럼 생겼고, 자유도도 인간보다 훨씬 크다. 그런데 정말 공포영화가 아닌가?”라는 반응을 보였다. 영상 시작 부분에서 아틀라스는 바닥에 등을 대고 가만히 누워 있는 모습입니다. 다음은 입이 떡 벌어지는 내용이다

Google은 열광하고 있습니다. JAX 성능이 Pytorch와 TensorFlow를 능가합니다! GPU 추론 훈련을 위한 가장 빠른 선택이 될 수 있습니다. Google은 열광하고 있습니다. JAX 성능이 Pytorch와 TensorFlow를 능가합니다! GPU 추론 훈련을 위한 가장 빠른 선택이 될 수 있습니다. Apr 01, 2024 pm 07:46 PM

Google이 추진하는 JAX의 성능은 최근 벤치마크 테스트에서 Pytorch와 TensorFlow를 능가하여 7개 지표에서 1위를 차지했습니다. 그리고 JAX 성능이 가장 좋은 TPU에서는 테스트가 이루어지지 않았습니다. 개발자들 사이에서는 여전히 Tensorflow보다 Pytorch가 더 인기가 있습니다. 그러나 앞으로는 더 큰 모델이 JAX 플랫폼을 기반으로 훈련되고 실행될 것입니다. 모델 최근 Keras 팀은 기본 PyTorch 구현을 사용하여 세 가지 백엔드(TensorFlow, JAX, PyTorch)와 TensorFlow를 사용하는 Keras2를 벤치마킹했습니다. 첫째, 그들은 주류 세트를 선택합니다.

시계열 예측 + NLP 대규모 모델에 대한 새로운 작업: 시계열 예측을 위한 암시적 프롬프트 자동 생성 시계열 예측 + NLP 대규모 모델에 대한 새로운 작업: 시계열 예측을 위한 암시적 프롬프트 자동 생성 Mar 18, 2024 am 09:20 AM

오늘 저는 시계열 예측 성능을 향상시키기 위해 잠재 공간에서 시계열 데이터를 대규모 자연어 처리(NLP) 모델과 정렬하는 방법을 제안하는 코네티컷 대학의 최근 연구 작업을 공유하고 싶습니다. 이 방법의 핵심은 잠재 공간 힌트(프롬프트)를 사용하여 시계열 예측의 정확성을 높이는 것입니다. 논문 제목: S2IP-LLM: SemanticSpaceInformedPromptLearningwithLLMforTimeSeriesForecasting 다운로드 주소: https://arxiv.org/pdf/2403.05798v1.pdf 1. 큰 문제 배경 모델

공장에서 일하는 테슬라 로봇, 머스크 : 올해 손의 자유도가 22도에 달할 것! 공장에서 일하는 테슬라 로봇, 머스크 : 올해 손의 자유도가 22도에 달할 것! May 06, 2024 pm 04:13 PM

테슬라의 로봇 옵티머스(Optimus)의 최신 영상이 공개됐는데, 이미 공장에서 작동이 가능한 상태다. 정상 속도에서는 배터리(테슬라의 4680 배터리)를 다음과 같이 분류합니다. 공식은 또한 20배 속도로 보이는 모습을 공개했습니다. 작은 "워크스테이션"에서 따고 따고 따고 : 이번에 출시됩니다. 영상에는 옵티머스가 공장에서 이 작업을 전 과정에 걸쳐 사람의 개입 없이 완전히 자율적으로 완료하는 모습이 담겨 있습니다. 그리고 Optimus의 관점에서 보면 자동 오류 수정에 중점을 두고 구부러진 배터리를 집어 넣을 수도 있습니다. NVIDIA 과학자 Jim Fan은 Optimus의 손에 대해 높은 평가를 했습니다. Optimus의 손은 세계의 다섯 손가락 로봇 중 하나입니다. 가장 능숙합니다. 손은 촉각적일 뿐만 아니라

FisheyeDetNet: 어안 카메라를 기반으로 한 최초의 표적 탐지 알고리즘 FisheyeDetNet: 어안 카메라를 기반으로 한 최초의 표적 탐지 알고리즘 Apr 26, 2024 am 11:37 AM

표적 탐지는 자율주행 시스템에서 상대적으로 성숙한 문제이며, 그 중 보행자 탐지는 가장 먼저 배포되는 알고리즘 중 하나입니다. 대부분의 논문에서 매우 포괄적인 연구가 수행되었습니다. 그러나 서라운드 뷰를 위한 어안 카메라를 사용한 거리 인식은 상대적으로 덜 연구되었습니다. 큰 방사형 왜곡으로 인해 표준 경계 상자 표현은 어안 카메라에서 구현하기 어렵습니다. 위의 설명을 완화하기 위해 확장된 경계 상자, 타원 및 일반 다각형 디자인을 극/각 표현으로 탐색하고 인스턴스 분할 mIOU 메트릭을 정의하여 이러한 표현을 분석합니다. 제안된 다각형 형태의 모델 fisheyeDetNet은 다른 모델보다 성능이 뛰어나며 동시에 자율 주행을 위한 Valeo fisheye 카메라 데이터 세트에서 49.5% mAP를 달성합니다.

See all articles