AI चैटबॉट जवाब कैसे बनाता है?

कोहाकु
कोहाकुसवाल पूछते ही AI का जवाब फ़ौरन आ जाता है। आख़िर वह लिखा कैसे जाता है?
30 सेकंड में जवाब
कोहाकुअसल में, वह शब्दों को एक-एक करके चुनकर जोड़ता जाता है।

AI चैटबॉट आपका सवाल लेकर एक ही कदम बार-बार दोहराता है: अगला संभावित "शब्द" चुनना और उसे जोड़ना। इसके लिए उसे पहले बहुत सारे लेखों से अगला शब्द अंदाज़ा लगाना सिखाया जाता है, फिर ऐसे सुधारा जाता है कि उसके जवाब उन जवाबों के क़रीब हों जिन्हें लोगों ने बेहतर माना।

कोहाकु
कोहाकुतो चलिए, अब इसे विस्तार से समझते हैं।
डेटा सेंटर में कतारों में लगे सर्वर रैक
डेटा सेंटर में कतार में लगे सर्वर (बहुत सारा हिसाब लगाने वाले कंप्यूटर) के रैक।फ़ोटो: PiDatacenters / CC BY-SA 4.0 / विकिमीडिया कॉमन्स

लिखे हुए को छोटे "टोकन" में बाँटना

चैटबॉट में आप जो लिखते हैं, वह पहले "टोकन" नाम के छोटे टुकड़ों में बाँटा जाता है। टोकन एक पूरा शब्द भी हो सकता है, शब्द का हिस्सा भी, या सिर्फ़ एक अक्षर भी। AI के अंदर आपका लिखा हुआ इन्हीं टोकनों की कतार की तरह हिसाब में लिया जाता है।

अगला शब्द पहचानने का अभ्यास, फिर सुधार

Claude नाम का AI बनाने वाली कंपनी Anthropic के अनुसार, बुनियादी मॉडल को बहुत सारे लेखों से यह सिखाया जाता है कि पहले लिखे शब्दों से अगला शब्द क्या होगा। इसे "प्री-ट्रेनिंग" कहते हैं। लेकिन इस चरण में मॉडल सवालों का जवाब देने या निर्देश मानने में अच्छा नहीं होता। इसलिए उसे और ट्रेनिंग से, और RLHF नाम के तरीक़े से सुधारा जाता है: लोग 2 या ज़्यादा जवाबों की तुलना करके उन्हें क्रम देते हैं, और मॉडल को ऊपर वाले जवाबों जैसे जवाब देने की ओर बढ़ाया जाता है। ऐसे वह एक काम का सहायक बनता है।

चित्र: AI चैटबॉट कैसे तैयार होता है
प्री-ट्रेनिंगअगला शब्द पहचाननासुधार (RLHF आदि)लोग जवाबों को क्रम देते हैंमॉडल अच्छे जवाब की ओरएक काम का सहायक

एक-एक करके चुनना और जोड़ना

जवाब लिखते समय वह आपका सवाल और अब तक लिखा जवाब देखकर अगला एक टोकन चुनता है और उसे जोड़ देता है। यह बहुत बार दोहराने से पूरा जवाब बन जाता है। एक ही सवाल पर हर बार थोड़ा अलग जवाब इसलिए आता है, क्योंकि अगला शब्द चुनने में थोड़ा अनियमितपन (रैंडमनेस) डालने वाली एक सेटिंग होती है।

चित्र: जवाब कैसे बनता है
ढेर सारे लेख से सीखी AI उम्मीदवारों में से अगला शब्द-टुकड़ा चुनकर जोड़ती है, और यह बार-बार दोहराती है
  1. 1सीखने के लिए इस्तेमाल हुआ ढेर सारा लेख
  2. 2अब तक के वाक्य को दिखाती शब्द-टुकड़ों की कतार
  3. 3अगले शब्द-टुकड़े के उम्मीदवार
  4. 4चुना गया शब्द-टुकड़ा
  5. 5चुनकर जोड़ने का बार-बार दोहराया जाने वाला क्रम
कोहाकु
कोहाकुइसे बनाने वाले भी अभी बहुत कुछ नहीं समझ पाए हैं, क्या यह एक अनोखा औज़ार नहीं है?

अंदर क्या होता है, यह अभी शोध में है

ये मॉडल लोगों के एक-एक नियम लिखने से नहीं बनते। ट्रेनिंग के दौरान ही सवाल हल करने के उनके तरीक़े आकार लेते हैं। इसलिए इन्हें बनाने वाली कंपनियाँ भी अभी तक नहीं समझ पाई हैं कि अंदर ज़्यादातर क्या होता है, और शोध जारी है। 2025 के एक शोध में पाया गया कि कविता लिखते समय मॉडल पंक्ति के आख़िर में आने वाले तुकांत शब्दों के विकल्प पहले तैयार करता है, फिर पंक्ति लिखता है। यह भी पाया गया कि ज़रूरी जानकारी न होने पर भी अगर "यह जाना-पहचाना लगता है" वाला संकेत चालू हो जाए, तो मॉडल सही लगने वाली पर ग़लत बात लिख सकता है। ज़रूरी बातों को दूसरे स्रोतों से भी जाँच लें।

और जानना चाहते हैं?

  • Claude के पुराने मॉडलों में एक टोकन अंग्रेज़ी के लगभग 3.5 अक्षरों के बराबर माना जाता है।
  • जवाब लिखते समय मॉडल कितना लिखा हुआ दोबारा देख सकता है, इसकी एक सीमा होती है, जिसे "कॉन्टेक्स्ट विंडो" कहते हैं। यह जितनी बड़ी हो, लंबे लेख संभालना उतना आसान होता है।
  • जोड़ पर हुए एक शोध में पाया गया कि दो रास्ते एक साथ काम करते हैं: एक मोटा-मोटा जवाब निकालता है, और दूसरा आख़िरी अंक ठीक-ठीक निकालता है।
कोहाकु
कोहाकुअगला शब्द एक-एक करके चुनकर जवाब बनाना, यही है AI चैटबॉट का तरीका। ज़रूरी बातों को कृपया दूसरे स्रोतों से भी जाँच लीजिए।

त्वरित प्रश्नोत्तरी: खुद को परखें

कोहाकुअभी जो पढ़ा, याद है? एक बार आज़माइए!

AI चैटबॉट अपना जवाब कैसे बनाता है?

उत्तर दिखाएँ
  1. अगला शब्द एक-एक करके चुनता है
  2. इंटरनेट से जवाब नकल करता है
  3. तय जवाबों की सूची में ढूँढता है

अगला शब्द एक-एक करके चुनता है वह सवाल और अब तक लिखा हिस्सा देखकर अगला एक टोकन चुनता है, उसे जोड़ता है, और यही दोहराकर जवाब बनाता है।

स्रोत
  1. GlossaryAnthropic(Claude の開発者向け資料)
  2. Tracing the thoughts of a large language modelAnthropic

यह लेख 2026-10-03 तक ऊपर दिए गए स्रोतों की जाँच करके लिखा गया था। शोध आगे बढ़ने पर व्याख्याएँ बदल सकती हैं। फ़ोटो के श्रेय प्रत्येक फ़ोटो के नीचे दिए गए हैं।

अगला रोचक तथ्य ▶

तकनीकफ़ोन की स्क्रीन आपकी उँगली को कैसे महसूस करती है?फ़ोन की स्क्रीन उँगली के हल्के-से छूने पर भी जवाब देती है। आख़िर वह उँगली में क्या महसूस करती है?