अलीबाबा ने पेश किया Qwen3-Omni: ओपन सोर्स मल्टीमॉडल एआई मॉडल

पढ़ने में 14 मिनट
Alibaba Plans Qwen 3 AI Model Release in Mid-April, Following Qwen2.5 ...

ओपन सोर्स के रूप में आया मूल रूप से मल्टीमॉडल मॉडल

अलीबाबा क्लाउड ने Qwen3-Omni पेश किया है, जो एक मल्टीमॉडल एआई मॉडल है और एक ही सिस्टम में टेक्स्ट, तस्वीरों, ऑडियो और वीडियो को मूल रूप से एकीकृत करता है। यह रिलीज़ व्यापक क्षमताओं को उद्यमों के अनुकूल ओपन सोर्स लाइसेंस के साथ जोड़कर रियल टाइम असिस्टेंट्स की प्रतिस्पर्धा को नए मुकाम पर ले जाती है। मॉडल चारों प्रकार के इनपुट स्वीकार करता है और फिर टेक्स्ट या स्वाभाविक लगने वाली बोली में जवाब देता है। Apache 2.0 लाइसेंस के तहत इसे मुफ्त डाउनलोड किया जा सकता है, इसमें बदलाव किए जा सकते हैं और व्यावसायिक रूप से इस्तेमाल किया जा सकता है। इस उदार लाइसेंस में पेटेंट अनुदान भी शामिल है। इस कदम से अलीबाबा, OpenAI और Google के मालिकाना उत्पादों के एक विश्वसनीय विकल्प के रूप में उभरता है, साथ ही डेवलपर्स को इस बात पर पूरा नियंत्रण मिलता है कि मॉडल कहां और कैसे चलेगा।

विषय-सूची
  1. ओपन सोर्स के रूप में आया मूल रूप से मल्टीमॉडल मॉडल
  2. यह लॉन्च क्यों अहम है
  3. GPT-4o और Gemini से Qwen3-Omni कैसे अलग है
  4. लाइव बातचीत के लिए गति
  5. आर्किटेक्चर के भीतर
  6. संस्करण, भाषाएं और संदर्भ सीमाएं
  7. बेंचमार्क और उन्हें समझने का तरीका
  8. डेवलपर्स आज क्या बना सकते हैं
  9. आम उपयोग
  10. उद्यमों के लिए लागत और लाइसेंस
  11. लागत और संचालन
  12. जोखिम और जिम्मेदार तैनाती
  13. शुरुआत कैसे करें
  14. मुख्य बातें

Qwen3-Omni, Qwen मॉडल श्रृंखला का हिस्सा है, जिसका दायरा लगातार बढ़ता रहा है। टीम के मुताबिक, नए मॉडल को विशाल टेक्स्ट कॉर्पस और बड़े पैमाने के ऑडियो व दृश्य डेटा पर प्रशिक्षित किया गया, फिर लाइव बातचीत में तत्परता से जवाब देने के लिए उसे बेहतर बनाया गया। यह तीन मुख्य रूपों में उपलब्ध है, जो आम जरूरतों को पूरा करते हैं। Instruct मॉडल मिले-जुले इनपुट संभालता है और जवाब बोलकर भी दे सकता है। Thinking मॉडल लंबा संदर्भ लेकर कठिन तर्क पर ध्यान देता है। Captioner कम मनगढ़ंत जवाबों के साथ ऑडियो का वर्णन करने में विशेषज्ञ है। इसे आधिकारिक GitHub रिपॉजिटरी, Hugging Face जैसे मॉडल हब और तेज़ Flash विकल्प वाली होस्टेड API के जरिये उपलब्ध कराया गया है। देर रात हुई इस लॉन्च में नया Qwen3 TTS सिस्टम और इमेज एडिटिंग मॉडल भी पेश किया गया, जो मल्टीमॉडल संवाद के लिए पूरा टेक्नोलॉजी स्टैक देने की कोशिश को दर्शाता है।

यह लॉन्च क्यों अहम है

मल्टीमॉडल असिस्टेंट्स डेमो से निकलकर वास्तविक उत्पादन कार्यों में पहुंच रहे हैं। उद्यम एक ऐसा मॉडल चाहते हैं जो रियल टाइम में सुन सके, देख सके, पढ़ सके और तर्क कर सके, फिर स्वाभाविक उतार-चढ़ाव वाली आवाज़ में जवाब दे। Qwen3-Omni इसी उपयोग के लिए तैयार किया गया है। ओपन एक्सेस के साथ भाषण, ऑडियो, तस्वीर और वीडियो से जुड़े कई परीक्षणों में अत्याधुनिक प्रदर्शन के दावों का यह मेल उन खरीदारों के लिए घोषणा को अहम बनाता है जिन्हें लचीलेपन, कीमत पर नियंत्रण और अपने परिसर में तैनाती की जरूरत है।

विज्ञापन

GPT-4o और Gemini से Qwen3-Omni कैसे अलग है

प्रतिस्पर्धी कंपनियों ने ऐसे ओम्नी मॉडल का विचार लोकप्रिय बनाया जो देख, सुन और बोल सकते हैं। OpenAI ने GPT-4o में टेक्स्ट, तस्वीर और ऑडियो को एक ही जगह जोड़ा। Google ने कुछ उत्पाद स्तरों में Gemini 2.5 के लिए वीडियो विश्लेषण की सुविधा बढ़ाई। Qwen3-Omni को शुरू से ही चारों प्रकार के इनपुट के लिए एकल, शुरू से अंत तक काम करने वाले स्टैक के रूप में बनाया गया है। मॉडल वीडियो को समझ सकता है, जैसे दृश्यों का पता लगाना और घटनाओं पर नजर रखना; OCR और संदर्भ-आधारित पहचान के लिए स्थिर तस्वीरें और दस्तावेज़ ले सकता है; आवाज़ सुन सकता है और टेक्स्ट पढ़ सकता है। जवाब टेक्स्ट या आवाज़ में दिए जाते हैं। इससे लाइव संवाद में आउटपुट सरल रहता है और तस्वीर या वीडियो बनाने की जटिलता से बचा जा सकता है।

एक अहम अंतर इसकी उपलब्धता है। Qwen3-Omni Apache 2.0 के तहत जारी किया गया है, जिससे उद्यम मॉडल के वेट डाउनलोड कर सकते हैं, उसे अपने इंफ्रास्ट्रक्चर पर चला सकते हैं और लाइसेंस पर बातचीत किए बिना खास क्षेत्रों के लिए उसके व्यवहार को फाइन-ट्यून कर सकते हैं। मालिकाना सिस्टम में खुद होस्ट करने पर पाबंदियां होती हैं या हर बातचीत के लिए प्रति टोकन शुल्क देना पड़ता है। Google का एक अन्य ओपन मॉडल परिवार Gemma अब भी केवल टेक्स्ट तक सीमित है, इसलिए उसका मल्टीमॉडल दायरा समान नहीं है। जो टीमें आवाज़, दृष्टि और टेक्स्ट के कामों के लिए एक ओपन मॉडल अपनाना चाहती हैं, उनके लिए Qwen3-Omni एक कमी पूरी करता है।

लाइव बातचीत के लिए गति

अलीबाबा के प्रकाशित आंकड़ों के मुताबिक, ऑडियो के लिए पहला पैकेट आने में सैद्धांतिक रूप से करीब 234 मिलीसेकंड और वीडियो के लिए करीब 547 मिलीसेकंड लगते हैं। यह दायरा बातचीत में बारी लेने की मानवीय अपेक्षाओं के अनुरूप है और कुशल स्ट्रीमिंग के साथ अलग-अलग भौगोलिक क्षेत्रों में रियल टाइम इस्तेमाल को व्यावहारिक बनाता है। बताए गए आंकड़े आंतरिक सिस्टम पर मापे गए हैं, इसलिए उत्पादन में नतीजे हार्डवेयर, एक साथ चलने वाले कामों और नेटवर्क स्थितियों के अनुसार बदलेंगे। फिर भी, लोड के दौरान रियल टाइम फैक्टर से कम लेटेंसी बताती है कि मॉडल को व्यावहारिक तैनाती के लिए तैयार किया गया है।

विज्ञापन

आर्किटेक्चर के भीतर

मॉडल में दो हिस्सों वाला डिजाइन है, जिसे टीम Thinker और Talker कहती है। Thinker मल्टीमॉडल समझ और तर्क का काम संभालता है। यह टेक्स्ट पढ़ता है, पिक्सल देखता है और ऑडियो फीचर सुनता है, फिर सामग्री की योजना बनाकर उसे तैयार करता है। Talker का ध्यान आवाज़ पर है। यह उच्च-स्तरीय निरूपणों को स्वाभाविक आवाज़ में बदलकर स्ट्रीमिंग जवाब देता है। इन भूमिकाओं को अलग रखने से भाषा मॉडल आगे की सोच सकता है, जबकि स्पीच स्टैक अपनी गति से काम करता है।

दोनों घटक Mixture of Experts तकनीक का उपयोग करते हैं। इसमें कई विशेषज्ञ सबनेटवर्क प्रशिक्षित किए जाते हैं, लेकिन हर टोकन के लिए उनमें से केवल कुछ सक्रिय होते हैं। हर चरण में सभी पैरामीटर सक्रिय किए बिना, इससे एक साथ अधिक काम संभालने की क्षमता बढ़ती है। स्पीच पाइपलाइन में मल्टी-कोडबुक ऑटोरेग्रेसिव तरीका है, जो ऑडियो को संक्षिप्त करके अलग-अलग कोड में बदलता है। हल्का Code2Wav कन्वोल्यूशनल नेटवर्क इन कोड को वेवफॉर्म में बदलता है। इस तरीके से आवाज़ का टोन और उतार-चढ़ाव बनाए रखते हुए देरी घटती है, जिससे कम लेटेंसी पर बोली कम रोबोटिक लगती है।

Talker को Thinker के टेक्स्ट निरूपणों से अलग रखा गया है और यह सीधे ऑडियो तथा दृश्य फीचर पर निर्भर करता है। इससे ऑडियो-विजुअल संवाद में आवाज़ को स्क्रीन पर हो रही गतिविधि के अनुरूप रखने में मदद मिलती है। चीजों को समझने वाले हिस्से में Audio Transformer encoder को करीब 20 मिलियन घंटे के पर्यवेक्षित ऑडियो पर प्रशिक्षित किया गया। प्रीट्रेनिंग कई चरणों में होती है। टीम पहले एन्कोडरों को संरेखित करती है, फिर टेक्स्ट, ऑडियो, तस्वीर और वीडियो के करीब दो ट्रिलियन टोकन पर प्रशिक्षण देती है और उसके बाद लंबे सत्रों के लिए संदर्भ क्षमता बढ़ाती है। पोस्ट-ट्रेनिंग में पर्यवेक्षित फाइन-ट्यूनिंग, डिस्टिलेशन और Thinker तथा Talker, दोनों के लिए अनुकूलन के चरण शामिल हैं।

विज्ञापन

संस्करण, भाषाएं और संदर्भ सीमाएं

Qwen3-Omni, Qwen3-Omni-30B-A3B के रूप में तीन सार्वजनिक संस्करणों में आया है। Instruct मॉडल ऑडियो, वीडियो और टेक्स्ट इनपुट लेकर टेक्स्ट और आवाज़ में जवाब देता है। Thinking मॉडल कठिन तर्क, गणितीय चरणों और योजना बनाने के लिए है तथा टेक्स्ट में जवाब देता है। Captioner को विस्तार से ऑडियो का वर्णन करने के लिए तैयार किया गया है। अलीबाबा क्लाउड के जरिये होस्ट किया गया Flash विकल्प तेज़ संवाद देने का लक्ष्य रखता है।

बहुभाषी पहुंच पर खास ध्यान दिया गया है। मूल मॉडल टेक्स्ट के लिए 119 भाषाओं, स्पीच इनपुट के लिए 19 भाषाओं और स्पीच आउटपुट के लिए 10 भाषाओं का समर्थन करता है। इनमें कैंटोनीज़ जैसी व्यापक रूप से इस्तेमाल की जाने वाली बोलियां भी शामिल हैं। स्थानीय लहजों और लिपियों के अनुरूप आवाज़ वाले अनुभव तैयार करने की जरूरत वाले वैश्विक तैनाती में यह संतुलन मददगार हो सकता है।

सत्र लंबे हो सकते हैं। Thinking Mode में संदर्भ विंडो 65,536 टोकन तक जाती है। Non Thinking Mode में यह 49,152 टोकन तक है। इनपुट और आउटपुट की अधिकतम सीमा 16,384 टोकन रखी गई है। जटिल तर्क के लिए सबसे लंबी चेन 32,768 टोकन तक हो सकती है। API में हर 1,000 टोकन के हिसाब से शुल्क लिया जाता है और टेक्स्ट, ऑडियो, तस्वीर या वीडियो इनपुट तथा टेक्स्ट या ऑडियो आउटपुट की दरें अलग-अलग हैं। नए खातों को सक्रियण के बाद 90 दिनों तक सभी मोडैलिटी में कुल दस लाख टोकन का मुफ्त कोटा मिलता है।

बेंचमार्क और उन्हें समझने का तरीका

अलीबाबा ने टेक्स्ट और तर्क, स्पीच और ऑडियो, तस्वीर और दृष्टि तथा ऑडियो-विजुअल वीडियो कार्यों से जुड़े 36 बेंचमार्क के नतीजे बताए हैं। कंपनी के मुताबिक, Qwen3-Omni ने 22 परीक्षणों में अत्याधुनिक अंक हासिल किए और 32 में ओपन सोर्स मॉडलों में आगे रहा। टीम का यह भी कहना है कि कई ऑडियो और ऑडियो-विजुअल मूल्यांकनों में इसका प्रदर्शन GPT-4o और Gemini 2.5 Pro से बेहतर है। इन श्रेणियों में स्पीच रिकग्निशन, ऑडियो की समझ, ऑडियो-विजुअल सवाल-जवाब, वीडियो वर्णन और आवाज़ तैयार करना शामिल है। टेक्स्ट-केंद्रित कार्यों में, बताया गया है कि मॉडल Qwen टेक्स्ट परिवार के कुछ मॉडलों के बराबर प्रदर्शन करता है।

बेंचमार्क दिशा दिखाते हैं, गारंटी नहीं देते। परीक्षणों का दायरा, निर्देशों के प्रारूप और अंक देने के नियम अलग-अलग होते हैं। कंपनियां तय करती हैं कि वे कौन-से मापदंड प्रकाशित करें, और अलग-अलग परीक्षणों में कुछ आर्किटेक्चर या प्रशिक्षण डेटा को फायदा मिल सकता है। वास्तविक तैनाती में शोर वाला ऑडियो, अलग-अलग माइक्रोफोन, तेजी से बदलते दृश्य और अलग-अलग लहजे शामिल होते हैं। टीमों को अपने नमूनों पर मूल्यांकन करना चाहिए, दबाव में मनगढ़ंत जवाबों की जांच करनी चाहिए और प्रति काम लागत को गति के मुकाबले मापना चाहिए। फिर भी, बताए गए नतीजों में शामिल कार्यों की व्यापकता संकेत देती है कि मॉडल को मल्टीमॉडैलिटी को शुरू से ही मुख्य लक्ष्य मानकर प्रशिक्षित किया गया, न कि बाद में एडेप्टर जोड़कर।

आधिकारिक दस्तावेज़ में Qwen टीम Qwen3-Omni को मूल रूप से बहुभाषी मॉडल बताती है, जो टेक्स्ट, तस्वीर, ऑडियो और वीडियो संसाधित करता है और स्ट्रीमिंग जवाब टेक्स्ट तथा बोले गए शब्दों के रूप में देता है। डिजाइन का लक्ष्य यह है कि भाषा मॉडल अगले कदम की योजना बनाते समय भी बोली स्वाभाविक बनी रहे।

विज्ञापन

डेवलपर्स आज क्या बना सकते हैं

रिपॉजिटरी और डेमो में आम कार्यों के लिए गाइड शामिल हैं, जो भारी कस्टमाइज़ेशन के बिना पहले से अच्छी तरह काम करते हैं। टीमें सरल उदाहरणों से शुरुआत कर सकती हैं और भरोसा बढ़ने पर उन्हें उत्पादन-स्तर की सुविधाओं में विस्तार दे सकती हैं।

आम उपयोग

यहां कुछ ऐसे उपयोग दिए गए हैं जो मॉडल की समझने, तर्क करने और आवाज़ से जुड़ी खूबियों के अनुरूप हैं:

  • लाइव कॉल, बैठकों और मीडिया के लिए बहुभाषी स्पीच रिकग्निशन।
  • व्यापक रूप से इस्तेमाल होने वाली भाषा-जोड़ी के बीच बोली में जवाब के साथ स्पीच अनुवाद।
  • परिवेश की आवाज़ों का वर्णन और संगीत का टैगिंग।
  • दस्तावेज़ों और स्क्रीनशॉट के लिए OCR तथा संबंधित हिस्सों का हवाला देने वाले संदर्भ-आधारित जवाब।
  • जटिल आरेखों या डैशबोर्ड से जुड़े सवालों के जवाब।
  • लंबी वीडियो क्लिप में नेविगेट करने के लिए वीडियो वर्णन, मुख्य अंश और घटना का पता लगाना।
  • प्रशिक्षण, सहायता और निर्देशात्मक सामग्री के लिए ऑडियो-विजुअल सवाल-जवाब।
  • रियल टाइम तकनीकी सहायता, जो समस्या का हल बताते हुए सुनती और देखती है।
  • कार्य पूरे करने के लिए बाहरी टूल और API का इस्तेमाल करने वाले एजेंट-जैसे वर्कफ़्लो।

सिस्टम प्रॉम्प्ट से मॉडल का व्यवहार तय किया जा सकता है, जैसे व्यक्तित्व, लहजा और प्रारूप। मॉडल रियल टाइम स्ट्रीमिंग का समर्थन करता है, इसलिए तर्क जारी रहते हुए भी आंशिक जवाब दे सकता है। यह तरीका वॉइस असिस्टेंट में अधिक स्वाभाविक लगता है, जहां लंबे मौन की तुलना में छोटे विराम और तुरंत स्पष्टीकरण बेहतर होते हैं। संवेदनशील तैनाती के लिए सुरक्षा व्यवस्था तैयार करना उपयोगी है, जिसमें प्रॉम्प्ट को मजबूत करना, टेक्स्ट और ऑडियो के लिए कंटेंट फ़िल्टर और संदर्भ तथा फैसलों का लॉग रखने वाला पॉलिसी इंजन शामिल हो।

उद्यमों के लिए लागत और लाइसेंस

Apache 2.0 के तहत जारी करने का फैसला अहम है। यह लाइसेंस व्यावसायिक उपयोग, वितरण, संशोधन और आगे लाइसेंस देने की अनुमति देता है। इसमें पेटेंट लाइसेंस भी है, जिससे उत्पादों में मॉडल जोड़ते समय कानूनी जोखिम घटता है। उद्यम Qwen3-Omni को निजी क्लस्टर या भरोसेमंद क्लाउड पर चला सकते हैं, अपने डेटा के लिए उसे अनुकूलित कर सकते हैं और किसी विक्रेता को उपयोग शुल्क दिए बिना सॉफ़्टवेयर जारी कर सकते हैं। इससे किसी एक सेवा प्रदाता पर निर्भरता खत्म होती है और अलग-अलग टीमों के लिए प्रयोग करना आसान होता है।

अलीबाबा Qwen परिवार के इर्द-गिर्द बढ़ते इकोसिस्टम का हवाला देता है। कंपनी के मुताबिक, पहले Qwen चेकपॉइंट आने के बाद से समूह ने सैकड़ों मॉडल जारी किए हैं और उनके डाउनलोड करोड़ों तक पहुंच गए हैं। डेवलपर्स ने सार्वजनिक हब पर हजारों व्युत्पन्न मॉडल प्रकाशित किए हैं, जिससे प्रोटोटाइप से उत्पादन तक पहुंचने में लगने वाला समय घटता है। नियमन वाले उद्योगों में, खुद होस्ट किया गया मल्टीमॉडल स्टैक डेटा को तय क्षेत्र में रखने और ऑडिट की शर्तें पूरी करने में मदद कर सकता है, साथ ही इन्फरेंस की लागत को अनुमानित बनाए रखता है।

लागत और संचालन

मल्टीमॉडल मॉडल चलाने के लिए योजना बनानी पड़ती है। GPU मेमोरी, ऑडियो और वीडियो के लिए स्टोरेज बैंडविड्थ तथा स्ट्रीमिंग के लिए तेज़ नेटवर्क, ये सभी प्रतिक्रिया की गति को प्रभावित करते हैं। इन्फ्रास्ट्रक्चर टीमें क्लस्टर का आकार तय करती हैं, तब तक शुरुआती काम को टोकन-आधारित API आसान बनाते हैं। दस लाख टोकन का 90 दिनों का मुफ्त कोटा, व्यवहार्यता जांचने, प्रॉम्प्ट बेहतर करने और आंतरिक डेटा पर गुणवत्ता मापने के लिए पर्याप्त है। काम का पैमाना बढ़ने पर संगठन अक्सर अलग-अलग मॉडल मिलाकर इस्तेमाल करते हैं। रोजमर्रा के ज्यादातर कार्य ओपन मॉडल से किए जा सकते हैं, जबकि खास मामलों या विशेष सुविधाओं के लिए मालिकाना API का उपयोग किया जा सकता है। इससे लचीलापन बनाए रखते हुए खर्च घटता है।

विज्ञापन

जोखिम और जिम्मेदार तैनाती

ऑडियो और वीडियो को अच्छी तरह समझने की क्षमता आकर्षक उत्पाद बनाने में मदद करती है। इससे दुरुपयोग का जोखिम भी बढ़ता है। वॉइस सिंथेसिस किसी खास आवाज़ को डिफ़ॉल्ट रूप से न भी बनाए, तब भी बोलने की शैली की नकल कर सकता है। उपयोगकर्ताओं को देखने और सुनने वाले रियल टाइम एजेंट के लिए स्पष्ट सहमति प्रक्रिया, सुरक्षित स्टोरेज और डेटा मिटाने की नीतियां जरूरी हैं। कानूनी टीमों को देखना चाहिए कि डिवाइस पर रिकॉर्डिंग से सर्वर और लॉग तक डेटा कैसे जाता है और नियमों के अनुरूप डेटा रखने की अवधि तय करनी चाहिए।

उद्यमों को मॉडल की मनगढ़ंत जवाबों, पक्षपात और असुरक्षित सामग्री के लिए कड़ी जांच करनी चाहिए। अव्यवस्थित माहौल में ऑडियो वर्णन आवाज़ों को गलत समझ सकता है। वीडियो वर्णन अलग-अलग दृश्यों के बीच का संदर्भ छोड़ सकता है। लंबे संदर्भ में निर्देशों से भटकाव आ सकता है। अच्छी मूल्यांकन योजना में प्रतिकूल प्रॉम्प्ट, अलग-अलग लहजों और बोलियों का कवरेज तथा सुरक्षा सीमाओं की रेड-टीमिंग शामिल होती है। अंतिम उपयोगकर्ताओं को समस्याएं बताने देने वाले फीडबैक चक्र जवाबदेही बनाए रखते हुए मॉडल को बेहतर करने में मदद करते हैं।

शुरुआत कैसे करें

डेवलपर्स आधिकारिक Qwen3-Omni GitHub रिपॉजिटरी से वेट और उदाहरण प्राप्त कर सकते हैं। क्विकस्टार्ट में Transformers और vLLM जैसी लोकप्रिय लाइब्रेरी के साथ मॉडल चलाने का तरीका बताया गया है। तेजी से परीक्षण के लिए Docker इमेज और वेब UI डेमो भी उपलब्ध हैं। अलीबाबा की API के जरिये होस्टेड एक्सेस उन टीमों के लिए उपयुक्त है जो इन्फ्रास्ट्रक्चर तय करने से पहले स्ट्रीमिंग स्पीच के साथ प्रोटोटाइप बनाना चाहती हैं। मॉडल हब में तैयार चेकपॉइंट और फाइन-ट्यूनिंग तथा मूल्यांकन के लिए समुदाय की गाइड उपलब्ध हैं।

लिंक: GitHub पर Qwen3-Omni

मुख्य बातें

  • अलीबाबा ने Qwen3-Omni को पेटेंट अनुदान वाले Apache 2.0 लाइसेंस के तहत ओपन सोर्स जारी किया है, जिससे मुफ्त व्यावसायिक उपयोग और पुनर्वितरण संभव है।
  • मॉडल टेक्स्ट, तस्वीर, ऑडियो और वीडियो स्वीकार करता है तथा रियल टाइम स्ट्रीमिंग के साथ टेक्स्ट या स्वाभाविक आवाज़ में जवाब देता है।
  • इसके तीन संस्करण उपलब्ध हैं: मल्टीमॉडल संवाद के लिए Instruct, जटिल तर्क के लिए Thinking और ऑडियो वर्णन के लिए Captioner।
  • बताई गई लेटेंसी ऑडियो के लिए करीब 234 मिलीसेकंड और वीडियो के लिए करीब 547 मिलीसेकंड है, ताकि बातचीत में स्वाभाविक रूप से बारी ली जा सके।
  • यह टेक्स्ट की 119 भाषाओं, स्पीच इनपुट की 19 भाषाओं और स्पीच आउटपुट की 10 भाषाओं का समर्थन करता है, जिनमें कैंटोनीज़ भी शामिल है।
  • 36 परीक्षणों में अलीबाबा ने 22 में अत्याधुनिक प्रदर्शन और 32 में ओपन मॉडलों के बीच बढ़त का दावा किया है। ऑडियो और वीडियो के नतीजे भी मजबूत बताए गए हैं।
  • Thinking Mode में संदर्भ विंडो 65,536 टोकन तक है और इनपुट या आउटपुट की अधिकतम सीमा 16,384 टोकन है।
  • API पर 90 दिनों के लिए दस लाख टोकन का मुफ्त कोटा है और अलग-अलग मोडैलिटी के लिए हर 1,000 टोकन पर शुल्क लिया जाता है।
  • उपयोगों में ट्रांसक्रिप्शन, अनुवाद, OCR, संगीत टैगिंग, वीडियो समझ और रियल टाइम असिस्टेंट शामिल हैं।
  • उद्यम Qwen3-Omni को खुद होस्ट, फाइन-ट्यून और अपने सिस्टम में जोड़ सकते हैं, साथ ही सुरक्षा, गोपनीयता और अनुपालन के नियंत्रण लागू कर सकते हैं।
यह लेख शेयर करें

आपको यह भी पसंद आ सकता है