Baidu Wenxin 대형 모델 버전 비교 테스트: ERNIE 3.5 8K VS ERNIE 4.0 8K
기원
제가 개발한 AI SEO 워드프레스 플러그인은 최근 많은 유저들에게 다운로드 및 결제가 이루어지고 있습니다. 지난 이틀 동안 친구가 AI SEO 플러그인을 구매하려고 하는데 Baidu Wenxin 대형 모델 버전 4.0(ERNIE 4.0 8K)을 사용해야 하는데 내 AI SEO CN 플러그인은 버전 3.5를 사용하고 있습니다. , ERNIE 3.5 8K 버전입니다.
그래서 지난 이틀 동안 Baidu Wenxin 대형 모델 버전 4.0을 지원하기 위해 AI SEO WordPress 플러그인의 CN 버전을 업그레이드했습니다.
이 과정에서 두 버전에 대한 실제 테스트는 필수입니다. 이러한 테스트는 여기에 요약되어 있습니다.
ERNIE 3.5 8K VS ERNIE 4.0 8K: 기사 생성 효과 비교
레드 와인과 관련된 다음 두 기사에서는 프롬프트 단어도 동일하며 생성된 결과도 크게 다르지 않습니다. 적어도 SEO의 경우 기본적으로 차이가 없습니다.
나는 비교를 생성하기 위해 유사한 기사를 많이 작성했으며 기본적으로 이러한 결론에 도달했습니다. 4.0이 만들어낸 기사의 문학적 재능은 3.5보다 확실히 좋아졌다.
ERNIE 3.5 8K VS ERNIE 4.0 8K: 가격 비교
ERNIE 4.0 8K의 가격은 ERNIE 3.5 8K보다 조금 더 비쌉니다.
입장료가 10배 이상 비쌉니다. 출력 비용은 20배 이상 비쌉니다.
대략적으로 계산해보면 1,000개 토큰은 한자 400~500자 정도입니다. 기사 하나를 한자 1,000자(토큰 2,000개)로 계산하면 ERNIE 4.0 8K를 사용하여 기사 하나를 생성하는 데 드는 비용은 0.6위안입니다. 10,000개의 기사를 일괄 생성하는 데 비용은 6,000위안입니다. 입력된 가격도 무시됩니다.
ERNIE 3.5 8K로 전환하면 기사 10,000개를 생성하는 데 비용이 240위안(출력만 계산)에 불과합니다.
비용 효율적인 관점에서는 ERNIE 3.5 8K를 선택하는 것이 더 적절합니다.
사실 글의 개요만 잘 조절된다면 ERNIE-Bot-turbo 만으로도 SEO에 충분합니다.
ERNIE 3.5 8K VS ERNIE 4.0 8K: 속도
ERNIE 4.0 8K는 ERNIE 3.5 8K보다 상당히 느립니다.
물론 ERNIE-Bot-turbo가 더 빠릅니다.
ERNIE 3.5 8K VS ERNIE 4.0 8K: 오류율
ERNIE-Bot-turbo 및 ERNIE 3.5 8K에서는 모든 것이 잘 작동합니다.
ERNIE 4.0 8K에는 몇 가지 문제가 있습니다. 즉, 기사를 일괄 생성할 때 많은 반환이 비어 있을 것이라는 것입니다. 처음에는 AI SEO 플러그인이 대형 모델 인터페이스에 대한 동시 호출을 사용했기 때문에 그런 줄 알았습니다. 직렬로 연결해도 문제는 여전히 발생합니다. 게다가 빈 상태로 돌아가는 현상도 기본적으로 불규칙하다.
요약하다
안건 | 어니 4.0 8K | 어니 3.5 8K | ERNIE-봇-터보 |
효과 생성 | 좋은 | ERNIE 4.0 8K와 크게 다르지 않습니다. | 열악하지만 기사 개요를 잘 제어할 수 있어 SEO에 충분함 |
가격 | 생산량: 0.3위안/천 토큰 | 출력: 0.012/천개 토큰 | 출력: 0.008/천개 토큰, 가장 저렴 |
속도 | 느린 | ERNIE 4.0 8K보다 훨씬 빠릅니다. | 셋 중 가장 빠르다 |
오류율 | 일괄 생성 중에 다수의 null 값이 반환됩니다. | 기본적으로 오류가 없습니다. | 기본적으로 오류가 발생하지 않았습니다. |
전반적으로 SEO의 경우 ERNIE-Bot-turbo 및 ERNIE 3.5 8K가 더 적합합니다.