그동안 챗GPT의 약점은 2021년 9월까지 학습한 데이터만 지원한다는 점과 없는 사실을 마치 진짜인것처럼 그럴듯하게 꾸며내는 할루시네이션 현상, 그리고 데이터의 편향성을 들 수 있다. 이중에서 실시간 정보를 지원하지 못한다는 약점은 조만간 사라질 것으로 보인다.

OpenAI는 지난 5월 ChatGPT iOS 앱에 인터넷 검색 기능을 추가했다가 7월 3일 ChatGPT에서 Bing으로 검색 기능을 비활성화시켰다. 그 이유는 사용자들이 페이월 기능의 허점을 발견하고 챗봇에 직접 URL을 입력해 유료 콘텐츠에 접근할 수 있다는 사실을 알아냈기 때문이다. 이후 Microsoft Bing측은 Open AI의 ChatGPT 팀과 협력하여 이 문제를 해결하고 있다고 발표했다.