टैलेंड ट्यूटोरियल: टैलेंड ईटीएल टूल क्या है?

टैलेंड क्या है?

Talend एक ओपन सोर्स सॉफ्टवेयर प्लेटफॉर्म है जो डेटा एकीकरण और डेटा प्रबंधन समाधान प्रदान करता है। Talend इसमें विशेषज्ञता रखता है। बड़ा डेटा एकीकरण। यह प्लेटफ़ॉर्म क्लाउड, बिग डेटा, एंटरप्राइज़ एप्लिकेशन एकीकरण, डेटा गुणवत्ता और मास्टर डेटा प्रबंधन जैसी सुविधाएँ प्रदान करता है। यह मेटाडेटा को संग्रहीत और पुनः उपयोग करने के लिए एक एकीकृत भंडार भी प्रदान करता है।

Talend ऐतिहासिक रूप से ओपन सोर्स और प्रीमियम दोनों संस्करणों में उपलब्ध रहा है, और इसका व्यापक रूप से क्लाउड कंप्यूटिंग और बिग डेटा इंटीग्रेशन के काम में उपयोग किया जाता है।

महत्वपूर्ण स्थिति अपडेट: Qlik ने मई 2023 में Talend का अधिग्रहण पूरा कर लिया, और 31 जनवरी 2024 को Talend Open Studio के निःशुल्क संस्करणों को बंद कर दिया गया — अब इन्हें होस्ट, पैच या अपडेट नहीं किया जाता है। वाणिज्यिक प्लेटफ़ॉर्म Qlik Talend Cloud के रूप में जारी है। नीचे दिए गए अनुभाग Open Studio के उस स्वरूप का वर्णन करते हैं जैसा कि यह समर्थित होने के दौरान काम करता था, जो अभी भी इसे समझने का सबसे स्पष्ट तरीका है। ईटीएल उपकरण इसे एक साथ रखा गया है।

टैलेंड का इतिहास

नीचे दिए गए महत्वपूर्ण बिंदु tracएक फ्रांसीसी अनुसंधान एवं विकास परियोजना से विकसित ई-टैलेंड, क्लिक के क्लाउड प्लेटफॉर्म के भीतर डेटा एकीकरण और गुणवत्ता इंजन है।

साल	मील का पत्थर
2002	अनुसंधान और विकास
2005	कंपनी निर्माण- एजीएफ प्राइवेट इक्विटी और गैले पार्टनर्स द्वारा वित्तपोषण का पहला दौर
2006	ओपन स्टूडियो V1.0- हमारे संचालन का शुभारंभ
2007	एकीकरण सुइट/वित्तपोषण का दूसरा दौर बंद
2008	ओपन प्रोफाइलर/ डेटा गुणवत्ता
2009	एकीकरण सूट RTx/MPx/MDM अधिग्रहण
2010	IDM सामुदायिक संस्करण/ MDM एंटरप्राइज़ संस्करण
2011	ओपन स्टूडियो V5
2014	OW2 सर्वश्रेष्ठ परियोजना
2015	मान्यता प्राप्त ट्रेंडसेटिंग उत्पाद
2016	डीबीटीए 100
2017	डेटा एकीकरण उपकरणों के लिए गार्टनर मैजिक क्वाड्रेंट
2021	सिलाई के साथ मूल एकीकरण Amazon रेडशिफ्ट कंसोल
2021	थोमा ब्रावो ने लगभग 2.4 बिलियन डॉलर के सौदे में टैलेंड को निजी कंपनी बना दिया।
2023	थॉमस ब्रावो द्वारा समर्थित Qlik ने मई में Talend का अधिग्रहण पूरा कर लिया।
2024	Talend Open Studio को 31 जनवरी को बंद कर दिया गया; इसके निःशुल्क डेस्कटॉप संस्करण को अब कोई अपडेट नहीं मिलेगा।
2024	Qlik Talend Cloud जुलाई में उत्तराधिकारी प्लेटफॉर्म के रूप में आम उपलब्धता तक पहुंच जाएगा, जिसमें AI-संवर्धित पाइपलाइन, डेटा उत्पाद और एक डेटा मार्केटप्लेस शामिल होंगे।
2024	Talend MDM सर्वर का सपोर्ट 31 दिसंबर को समाप्त हो रहा है; Talend 7.3 का स्टैंडर्ड सपोर्ट नवंबर में समाप्त हो जाएगा।
2025	Qlik Talend Cloud में RAG अनुप्रयोगों के लिए डेटा को वेक्टरराइज़ करने वाले नॉलेज मार्ट टास्क और Qlik Cloud Catalog में Talend Studio जॉब लीनेज की सुविधा जोड़ी गई है।
2025	नवंबर रिलीज़ में नियंत्रित डेटा उत्पादों, स्वचालित फ़ील्ड दस्तावेज़ीकरण, AI द्वारा सुझाए गए डेटा गुणवत्ता नियमों और डेटा प्रबंधन के लिए एक-क्लिक API एंडपॉइंट्स शामिल किए गए हैं।
2026	अप्रैल में Qlik Connect में, Qlik ने एजेंटिक डेटा इंजीनियरिंग की घोषणा की: डिक्लेरेटिव पाइपलाइन, Talend Studio के लिए एक AI असिस्टेंट, रीयल-टाइम राउटिंग और नेटिव ओपन लेकहाउस स्ट्रीमिंग।
2026	Talend 7.3 के लिए सशुल्क विस्तारित समर्थन दिसंबर में समाप्त हो रहा है, जिसके बाद Talend 8 या Qlik Talend Cloud ही एकमात्र समर्थित विकल्प रह जाएंगे।

टैलेंड उत्पाद सूट

टैलेंड प्रोडक्ट सूट में 3 प्रमुख उत्पाद शामिल हैं, जिनकी चर्चा नीचे की गई है।

टैलेंड बिग डेटा

टैलेंड ग्राफिकल टूल्स और विजार्ड्स की मदद से बिग डेटा इंटीग्रेशन को आसानी से स्वचालित कर सकता है। इससे किसी संगठन को अपाचे हैडूप के साथ काम करने वाला वातावरण बनाने में मदद मिलती है। Spark और NoSQL डेटाबेस क्लाउड या ऑन-प्रिमाइसेस नौकरियों के लिए।

कई कंपनियों ने लागत बचाने और प्रदर्शन में सुधार के लिए हैडूप को अपनाया, क्योंकि एंटरप्राइज़ समाधान अक्सर महंगे कंप्यूटिंग समय का उपयोग करते हैं। हैडूप की मदद से, भारी विश्लेषणात्मक कार्यभारों के लिए डेटा को रूपांतरित, शुद्ध, समृद्ध और एकीकृत किया जा सकता है।

टैलेंड सैंडबॉक्स में चार उपयोग के मामले शामिल हैं:

1. डेटा वेयरहाउस अनुकूलन
2. क्लिकस्ट्रीम एनालिटिक्स
3. सोशल मीडिया भावना विश्लेषण
4. अपाचे वेब्लॉग एनालिटिक्स

आप इनके ऊपर अपने खुद के, अधिक जटिल उपयोग के मामले भी बना सकते हैं।

बिग डेटा और हैडूप के लिए टैलेंड के लाभ

• ग्राफिकल इंटरफेस में घटकों को व्यवस्थित और कॉन्फ़िगर करके बिग डेटा जॉब डिज़ाइन की दक्षता में सुधार करता है।
• इसमें डेटा की गुणवत्ता, स्केलेबिलिटी और प्रबंधन संबंधी कार्यक्षमताएँ जोड़ी गई हैं।
• मैप रिड्यूस सपोर्ट से समानांतर डेटा प्रोसेसिंग तेज़ हो जाती है।
• साझा रिपॉजिटरी और रिमोट परिनियोजन
• डेटा की गुणवत्ता और प्रोफाइलिंग के साथ-साथ डेटा की सफाई
• एचबेस के लिए नेटिव सपोर्ट, एचडीएफएस, छत्ता, स्कूप और सुअर
• हॉर्टनवक्र्स डेटा प्लेटफ़ॉर्म में अंतर्निहित

डेटा एकीकरण

द टैलेंड डेटा एकीकरण सॉफ्टवेयर इसमें एक ओपन और स्केलेबल आर्किटेक्चर है जो व्यावसायिक अनुरोधों पर तेजी से प्रतिक्रिया देने की सुविधा देता है। यह टूल डेटा इंटीग्रेशन कार्यों को मैन्युअल कोडिंग की तुलना में अधिक तेजी से विकसित और तैनात करता है।

यह आपको अपने सभी डेटा को अन्य डेटा वेयरहाउस के साथ एकीकृत करने या सिस्टम के बीच डेटा को सिंक्रनाइज़ करने की सुविधा देता है। डेटा एकीकरण का अर्थ है विभिन्न स्रोतों में संग्रहीत डेटा को संयोजित करना और उपयोगकर्ताओं को उसका एक एकीकृत दृश्य प्रदान करना। Talend आपको ETL कार्यों को प्रबंधित करने में मदद करता है और उपयोगकर्ताओं को सरल, स्व-सेवा डेटा तैयारी प्रदान करता है।

डेटा एकीकरण के लिए टैलेन्ड के लाभ

एजाइल एकीकरण: 1000 से अधिक रेडीमेड कनेक्टर्स का उपयोग करके, बिना कोड लिखे व्यावसायिक अनुरोधों का तेजी से जवाब दें। Eclipseग्राफिकल टूल्स और प्रदर्शन के लिए अनुकूलित कोड जनरेटर।

टीम उत्पादकता: वर्जनिंग, प्रभाव विश्लेषण, परीक्षण और डिबगिंग, और मेटाडेटा प्रबंधन का उपयोग करके सहयोग करें।

आसान प्रबंधन: यह टूल उन्नत शेड्यूलिंग और मॉनिटरिंग की सुविधा प्रदान करता है। यह डैशबोर्ड के साथ रीयल-टाइम डेटा एकीकरण और कई नोड्स में तेजी से तैनाती के लिए केंद्रीकृत नियंत्रण प्रदान करता है।

प्रतिस्पर्धा में आगे रहें: इस प्लेटफॉर्म का उपयोग करने का मतलब है कि आपको नवीनतम डेटा एकीकरण सुविधाओं के आप तक पहुंचने का इंतजार नहीं करना पड़ेगा।

स्वामित्व की कम लागत: Talend एक सब्सक्रिप्शन मूल्य निर्धारण मॉडल का उपयोग करता है। आप Talend Studio का उपयोग करने वाले डेवलपर्स की संख्या के लिए भुगतान करते हैं, जो प्रति-सर्वर लाइसेंसिंग की तुलना में सस्ता है।

एकीकरण क्लाउड

आप एक उच्च स्तरीय और सुरक्षित क्लाउड इंटीग्रेशन प्लेटफॉर्म-एज़-ए-सर्विस (iPaaS) का उपयोग करके क्लाउड और ऑन-प्रिमाइसेस डेटा इंटीग्रेशन प्रोजेक्ट्स को गति दे सकते हैं। टैलेंड इंटीग्रेशन क्लाउड कनेक्टिविटी, अंतर्निहित डेटा गुणवत्ता और नेटिव कोड जनरेशन प्रदान करता है।

यह एक सुरक्षित क्लाउड एकीकरण प्लेटफॉर्म है जो आईटी और व्यावसायिक उपयोगकर्ताओं को क्लाउड और ऑन-प्रिमाइसेस सिस्टम दोनों को जोड़ने की अनुमति देता है। क्लाउड में डिज़ाइन किए गए कार्यों को वहीं प्रबंधित, मॉनिटर और नियंत्रित किया जा सकता है।

इंटीग्रेशन क्लाउड के लाभ

नीचे दी गई तालिका टैलेंड इंटीग्रेशन क्लाउड की तुलना उस मैन्युअल रूप से कोड किए गए विकल्प से करती है जिसे यह प्रतिस्थापित करने के लिए बनाया गया है।

टैलेंड इंटीग्रेशन क्लाउड	अन्य उपकरण
900+ ड्रैग-एन-ड्रॉप घटक	हाथ से कोडिंग करना अनुत्पादक है
अनुकूलित कोड उत्पन्न करता है	विशेष कौशल की आवश्यकता है
सहयोग और प्रबंधन	रखरखाव कठिन
गोल्ड सपोर्ट (एसएलए)	सीमित समर्थन

टैलेंड ओपन स्टूडियो क्या है?

Talend Open Studio डेटा एकीकरण, डेटा प्रोफाइलिंग, बिग डेटा, क्लाउड एकीकरण और अन्य के लिए एक ओपन आर्किटेक्चर था।

यह एक ग्राफिकल यूजर इंटरफेस (GUI) वातावरण है जो 1000 से अधिक पूर्वनिर्मित कनेक्टर प्रदान करता है। इससे फाइलों को रूपांतरित करना, डेटा लोड करना और फाइलों को स्थानांतरित और नाम बदलना जैसे कार्य आसानी से किए जा सकते हैं। प्रत्येक घटक को एक जटिल प्रक्रिया को परिभाषित करने के लिए कॉन्फ़िगर किया जा सकता है।

इंटीग्रेशन जॉब्स Talend कंपोनेंट्स से बनाए जाते हैं जिन्हें कोड करने के बजाय कॉन्फ़िगर किया जाता है। जॉब्स को डेवलपमेंट एनवायरनमेंट के अंदर से चलाया जा सकता है, या उन्हें एक्सपोर्ट करके स्टैंडअलोन स्क्रिप्ट के रूप में निष्पादित किया जा सकता है।

टैलेंड ओपन स्टूडियो का उपयोग करने के लाभ

• यह एकीकरण विकास के समय को हफ्तों और महीनों से घटाकर दिनों या घंटों तक कम कर देता है।
• यह विभिन्न स्रोतों में मौजूद डेटा को परिवर्तित और अद्यतन करता है।
• यह जटिल तैनाती कार्यों की निगरानी और प्रबंधन को आसानी से संभालता है।
• यह किसी भी तुलनीय समाधान की तुलना में स्वामित्व की सबसे कम लागतों में से एक प्रदान करता है।
• यह अंतर्निहित शक्ति को विरासत में प्राप्त करता है। Java प्रोग्रामिंग प्लेटफॉर्म।
• सोर्स और टारगेट कनेक्टर्स की विस्तृत श्रृंखला इसे उद्योग जगत में एक मजबूत विकल्प बनाती है।
• इसमें डेटा प्रवाह या माइग्रेशन के बाद मजबूत मल्टी-स्कीमा लॉग फ़ाइल और सुलह रिपोर्टिंग की सुविधा है।

पारंपरिक मालिकाना हक वाले ईटीएल इंजन की तुलना में, अंतर कुछ इस प्रकार दिखाई देते हैं:

विरासत ETL	Talend
स्वामित्व इंजन	प्रारंभिक
बिग डेटा को मापना कठिन	मूल कोड उत्पन्न करता है
महंगा	कम टीसीओ

नोट: क्योंकि ओपन स्टूडियो का सपोर्ट 31 जनवरी 2024 को समाप्त हो गया, इसलिए इसके मुफ़्त संस्करण को कोई सुरक्षा पैच नहीं मिलेगा। जो टीमें अभी भी इसका उपयोग कर रही हैं, उन्हें Qlik Talend Cloud या किसी अन्य समर्थित प्लेटफ़ॉर्म पर जाने की योजना बनानी चाहिए।

टैलेंड ओपन स्टूडियो Archiटेक्चर

आर्किटेक्चर को तीन मुख्य भागों में बांटा गया है — क्लाइंट, सर्वर और डेटाबेस — साथ ही वर्कस्पेस और रिपॉजिटरी जिनमें प्रोजेक्ट की फाइलें और मेटाडेटा रखे जाते हैं। नीचे दिया गया आरेख दिखाता है कि वे कैसे जुड़े हुए हैं।

ग्राहकों

क्लाइंट ब्लॉक में एक या अधिक टैलेन्ड स्टूडियो और वेब ब्राउज़र शामिल होते हैं, जो एक ही या अलग-अलग मशीनों पर चल सकते हैं। टैलेन्ड स्टूडियो आपको डेटा की मात्रा या प्रक्रिया की जटिलता की परवाह किए बिना डेटा एकीकरण प्रक्रियाएं बनाने की सुविधा देता है।

टैलेंड सर्वर

Talend सर्वर ब्लॉक में एक वेब-आधारित एप्लिकेशन सर्वर शामिल है। यह सभी परियोजनाओं के प्रशासन और रखरखाव को सक्षम बनाता है, और यह प्रशासनिक डेटाबेस में उपयोगकर्ता खाते, पहुंच अधिकार और परियोजना प्राधिकरण रखता है।

डाटाबेस

डेटाबेस ब्लॉक में एडमिनिस्ट्रेशन, ऑडिट और मॉनिटरिंग डेटाबेस शामिल हैं। एडमिनिस्ट्रेशन डेटाबेस उपयोगकर्ता खातों, पहुंच अधिकारों और प्रोजेक्ट प्राधिकरण का प्रबंधन करता है। ऑडिट डेटाबेस कार्यों के विभिन्न पहलुओं का मूल्यांकन करने में मदद करता है ताकि प्रक्रिया-उन्मुख निर्णय समर्थन प्रणाली का निर्माण किया जा सके।

कार्यस्थान

Talend में, वर्कस्पेस एक ऐसी डायरेक्टरी है जहाँ आप सभी प्रोजेक्ट फ़ोल्डर स्टोर करते हैं। प्रत्येक रिपॉजिटरी कनेक्शन के लिए कम से कम एक वर्कस्पेस डायरेक्टरी आवश्यक है। यदि आप डिफ़ॉल्ट डायरेक्टरी का उपयोग नहीं करना चाहते हैं, तो Talend कई वर्कस्पेस डायरेक्टरी से कनेक्ट हो सकता है।

कोष

रिपॉजिटरी वह भंडारण क्षेत्र है जिसका उपयोग टैलेंड ओपन स्टूडियो व्यावसायिक मॉडल या डिज़ाइन जॉब्स का वर्णन करने वाले डेटा को एकत्रित करने के लिए करता है।ping रिपॉजिटरी में मौजूद मेटाडेटा ही किसी कनेक्शन या स्कीमा को विभिन्न कार्यों में पुन: प्रयोज्य बनाता है।

टैलेंड ओपन स्टूडियो एक्सटेंशन

Talend Open Studio को उत्पादों के एक समूह द्वारा विस्तारित किया गया, जिसने शासन, गुणवत्ता और सेवा क्षमताओं को जोड़ा:

• टैलेंड इंटीग्रेशन सूट
• टैलेंड ऑन डिमांड
• टैलेंड डेटा गुणवत्ता
• टैलेंड ईएसबी
• टैलेंड बिग डेटा एकीकरण

ये नाम ओपन स्टूडियो युग से चले आ रहे हैं। Qlik के अंतर्गत, ये समान क्षमताएं अलग-अलग डाउनलोड के बजाय Qlik Talend Cloud के भीतर ही उपलब्ध कराई जाती हैं।

अक्सर पूछे जाने वाले प्रश्न