उत्पादक पूर्व-प्रशिक्षित ट्रांसफॉर्मर

मुक्त ज्ञानकोश विकिपीडिया से
मूल जीपीटी मॉडल

उत्पादक पूर्व-प्रशिक्षित ट्रांसफॉर्मर ( जीपीटी ) एक प्रकार का बड़ा भाषा मॉडल (एलएलएम) [1] [2] [3] और जेनरेटिव आर्टिफिशियल इंटेलिजेंस के लिए एक प्रमुख ढांचा है। [4] [5] पहला GPT 2018 में ओपन एआई द्वारा पेश किया गया था। [6] जीपीटी मॉडल कृत्रिम तंत्रिका नेटवर्क हैं जो ट्रांसफॉर्मर आर्किटेक्चर पर आधारित होते हैं, जो बिना लेबल वाले टेक्स्ट के बड़े डेटा सेट पर पूर्व-प्रशिक्षित होते हैं, और उपन्यास मानव जैसी सामग्री उत्पन्न करने में सक्षम होते हैं। [2] ट्रांसफॉर्मर आर्किटेक्चर अटेंशन इज़ आल यू नीड नामक शोधपत्र में गूगल के शोधकर्ताओं द्वारा प्रस्तावित एवं प्रकाशित किया गया। 2023 तक, अधिकांश एलएलएम में ये विशेषताएं हैं [7] और कभी-कभी उन्हें मोटे तौर पर जीपीटी के रूप में जाना जाता है। [8]

ओपनएआई ने बहुत प्रभावशाली जीपीटी फाउंडेशन मॉडल जारी किए हैं जिन्हें इसकी "जीपीटी-n" श्रृंखला को शामिल करने के लिए क्रमिक रूप से क्रमांकित किया गया है। [9] बढ़े हुए आकार (प्रशिक्षण योग्य मापदंडों की संख्या) और प्रशिक्षण के कारण इनमें से प्रत्येक पिछले की तुलना में काफी अधिक सक्षम था। इनमें से सबसे हालिया, जीपीटी-4, मार्च 2023 में जारी किया गया था। ऐसे मॉडल उनके अधिक कार्य-विशिष्ट जीपीटी सिस्टम के लिए आधार रहे हैं, जिसमें निर्देश के पालन के लिए ठीक-ठाक मॉडल भी शामिल हैं  — जो बदले में चैटजीपीटी चैटबॉट सेवा को शक्ति प्रदान करते हैं। [1]

"जीपीटी" शब्द का प्रयोग दूसरों द्वारा विकसित ऐसे मॉडलों के नाम और विवरण में भी किया जाता है। उदाहरण के लिए, अन्य GPT फाउंडेशन मॉडल में एलुथेर एआई द्वारा बनाए गए मॉडलों की एक श्रृंखला शामिल है, [10] और हाल ही में सेरेब्रस द्वारा बनाए गए सात मॉडल । इसके अलावा, विभिन्न उद्योगों की कंपनियों ने अपने संबंधित क्षेत्रों में कार्य-विशिष्ट जीपीटी विकसित किए हैं, जैसे सेल्सफोर्स का "आइंस्टीनजीपीटी" ( सीआरएम के लिए) [11] और ब्लूमबर्ग का "ब्लूमबर्गजीपीटी" (वित्त के लिए)। [12]

  1. Haddad, Mohammed. "How does GPT-4 work and how can you start using it in ChatGPT?". www.aljazeera.com. सन्दर्भ त्रुटि: <ref> अमान्य टैग है; ":1" नाम कई बार विभिन्न सामग्रियों में परिभाषित हो चुका है
  2. "Generative AI: a game-changer society needs to be ready for". World Economic Forum."Generative AI: a game-changer society needs to be ready for". World Economic Forum.
  3. सन्दर्भ त्रुटि: <ref> का गलत प्रयोग; :4 नाम के संदर्भ में जानकारी नहीं है।
  4. Hu, Luhui (November 15, 2022). "Generative AI and Future". Medium.
  5. "CSDL | IEEE Computer Society". www.computer.org.
  6. "Improving language understanding with unsupervised learning". openai.com (अंग्रेज़ी में). June 11, 2018. मूल से 2023-03-18 को पुरालेखित. अभिगमन तिथि 2023-03-18.
  7. Toews, Rob. "The Next Generation Of Large Language Models". Forbes.Toews, Rob. "The Next Generation Of Large Language Models". Forbes.
  8. Mckendrick, Joe (March 13, 2023). "Most Jobs Soon To Be 'Influenced' By Artificial Intelligence, Research Out Of OpenAI And University Of Pennsylvania Suggests". Forbes.Mckendrick, Joe (March 13, 2023). "Most Jobs Soon To Be 'Influenced' By Artificial Intelligence, Research Out Of OpenAI And University Of Pennsylvania Suggests". Forbes.
  9. "GPT-1 to GPT-4: Each of OpenAI's GPT Models Explained and Compared". MUO. April 11, 2023.
  10. Alford, Anthony (July 13, 2021). "EleutherAI Open-Sources Six Billion Parameter GPT-3 Clone GPT-J". InfoQ.
  11. Morrison, Ryan (7 March 2023). "Salesforce launches EinsteinGPT built with OpenAI technology". Tech Monitor.Morrison, Ryan (7 March 2023). "Salesforce launches EinsteinGPT built with OpenAI technology". Tech Monitor.
  12. "The ChatGPT of Finance is Here, Bloomberg is Combining AI and Fintech". Forbes."The ChatGPT of Finance is Here, Bloomberg is Combining AI and Fintech". Forbes.