Publikált tudományos cikkek valódi összefoglalóit, illetve a ChatGPT által generált absztraktokat helyezték egy kutatás során tudósok elé, hogy megvizsgálják, képesek-e megkülönböztetni azokat egymástól, képesek-e felismerni a "hamis", mesterséges intelligencia által elkészített kivonatokat. Az eredmény letaglózó volt, a tudósok az esetek nagyjából harmadában tévedtek. Míg egyesek szerint "szörnyű következményei" lehetnek annak, hogy a ChatGPT hihető tudományos absztraktokat ír, addig mások szerint a kihívásokra adott megoldásoknak nem magára a chatbotra kell összpontosítaniuk. A kutatásról szóló tanulmány szerzői azt javasolják, hogy a tudományos közlések esetében olyan irányelveket kell bevezetni, amelyek kizárják a mesterséges intelligencia által generált szövegek használatát.