Shakked Noy と Whitney Zhang は 453 人のマーケティング担当者、データ アナリスト、大学教育を受けた専門家を採用し、プレス リリースの作成、短いレポート、分析など、通常仕事の一環として引き受ける 2 種類のタスクを各自に完了させました。予定。 半数には、2 つのタスクのうち 2 番目のタスクを完了するために ChatGPT を使用するオプションが与えられました。
その後、他の専門家のグループが結果の品質チェックを行い、文章を 1 から 7 のスケールで評価し、7 が最高でした。 各作品は、研究プラットフォーム Prolific を通じて雇用された、同じ専門分野で働く 3 人によって評価されました。
ChatGPT の使用を選択したライターは、タスクを完了するのにかかる時間が 40% 短くなり、評価者がそれを使用しなかった参加者よりも品質が 18% 高いと評価した作品を作成しました。 もともとライティングに熟練していたライターは作業時間を短縮できましたが、非力なライターと評価されたライターはチャットボットにアクセスできるようになると、より質の高い作品を生み出すことができました。
「ChatGPT は、この種の文書コンテンツの作成に非常に優れているため、これを使用して執筆プロセスの一部を自動化すると、大幅な時間を節約できそうです」と研究の筆頭著者である Noy 氏は述べています。
「明らかなことの1つは、これはホワイトカラーの仕事にとって非常に便利だということです。多くの人がこれを使用することになり、ホワイトカラーの仕事の構造にかなり大きな影響を与えるでしょう」と彼は付け加えた。
ただし、ChatGPT やその他の生成 AI モデルの出力は信頼性からは程遠いです。 ChatGPT は、虚偽の情報を事実として正しいものとして提示することに非常に優れています。つまり、作業者はそれを活用してより多くの作業を生み出すことができるかもしれませんが、エラーが発生するリスクも抱えています。
個人の仕事の性質によっては、この種の不正確さは重大な影響を与える可能性があります。 スティーブン・シュワルツ弁護士は、 5,000ドルの罰金 先月、ChatGPTを使用して虚偽の司法意見や法的引用を含む法的準備書面を作成したとして、裁判官から判決を受けた。
裁判官のケビン・カステル氏は、「技術の進歩は当たり前のことであり、信頼できる人工知能ツールを支援に使用することに本質的に不当な点はない」と述べた。 「しかし、既存の規則では、提出書類の正確性を確保するために弁護士に門番の役割が課されています。」
この研究には、AIが一種の仮想アシスタントとして機能することで職場でどのように役立つ可能性があるかが示唆されていると、労働者による大規模な言語モデルの使用を研究しているカーネギーメロン大学の研究者、荒川陸氏は述べているが、この研究には関与していない。
「これは、人間と AI の協力がこの種のタスクでいかにうまく機能するかを示す、非常に興味深い結果だと思います。人間が AI を活用して出力を洗練すると、より良いコンテンツを作成できるようになります。」と彼は付け加えました。