Coinbase: ChatGPT는 보안 검토 프로세스에 통합하기 위한 정확도 요구 사항을 충족하지 않습니다.

코인베이스는 인기 있는 인공 지능 도구인 ChatGPT가 정확도 요구 사항을 충족하지 않기 때문에 보안 검토 프로세스에 통합하지 않을 것이라고 말했습니다.

Coinbase는 ChatGPT를 사용하여 이름이 지정되지 않은 20개의 ERC-20 토큰의 보안 표준을 테스트했습니다. 테스트 결과 이 ​​도구는 "스마트 계약 위험을 신속하게 평가할 수 있는 능력에 대한 약속"을 보여주었습니다.

그러나 ChatGPT 결과를 Coinbase 보안 팀 수동 검토와 비교했을 때 기계는 XNUMX개의 오답을 제공했으며 그 중 XNUMX개는 최악의 실패였습니다.

이러한 오류를 분석한 결과 ChatGPT가 고위험 자산을 저위험으로 잘못 분류한 것으로 나타났습니다. Coinbase는 "위험 점수를 과소 평가하는 것이 과대 평가하는 것보다 훨씬 더 해롭다"고 언급했습니다.

코인베이스 보안팀 말했다 먼저 ChatGPT에 형식을 사용하여 보안 분석을 수행하는 방법을 가르쳤습니다. 그러나 기계는 "강력한 보안 분석을 수행하기 위한 컨텍스트가 부족한 경우"를 인식할 수 없기 때문에 여전히 이러한 위험을 잘못 표시했습니다.

그 외에도 동일한 질문을 반복적으로 물었을 때 ChatGPT 응답도 일관성이 없었습니다. 코인베이스는 AI 도구가 "코드의 주석에 영향을 받았으며 때때로 기능 논리가 아닌 주석을 기본값으로 사용하는 것 같다"고 말했습니다.

코인베이스는 다음과 같이 결론을 내렸습니다.

"ChatGPT는 스마트 계약 위험을 신속하게 평가할 수 있는 능력을 보여주지만, Coinbase 보안 검토 프로세스에 통합하기 위한 정확성 요구 사항을 충족하지 못합니다."

한편, 이 실험은 잠재력의 또 다른 예를 나타냅니다. 어플리케이션 ChatGPT 및 최신 버전, GPT-4. AI 도구는 인간과 같은 반응과 주요 시험에서 높은 점수로 인기를 얻었습니다.

암호화 애호가들은 또한 이더리움 스마트 계약을 검토하고 취약성을 식별하고 코드를 악용하는 방법을 강조했습니다. 코인베이스 이사 코너 그로건 유명한 이것은 기계가 "많은 보안 취약점을 강조하고 계약이 악용될 수 있는 표면 영역을 지적한" 트위터 스레드에서입니다.

몇몇 블록체인 개발자는 이 도구가 자신의 작업에 도움이 될 수 있다고 믿지만 사람을 대체하지는 않습니다.

• SEO 기반 콘텐츠 및 PR 배포. 오늘 증폭하십시오.
• 플라토 블록체인. Web3 메타버스 인텔리전스. 지식 증폭. 여기에서 액세스하십시오.
• 출처: https://cryptoslate.com/coinbase-chatgpt-doesnt-meet-accuracy-requirements-for-integration-into-security-review-process/