Data Warehouse and Data Lake; a key difference between these two

By



As far as we’re enhancing the use of technology, we’re proceeding towards the digital era. But in this changing era, the thing which can help us to lead the race is data. Data not only gives important information about the product, but also helps to find the unsolved mysteries about human behaviour, which makes product better than before. Data Warehouse and Data Lake are the terms, which can help us to understand data in a better way.


First of all, let’s talk about Data Lake. An unorganised small chunk protracted in the field of big data, can be known as Data Lake. We use Data Science to make it more organise, more appropriate so that we can find desirable output from this big thing. Hadoop, Azure and Amazon S3 are some of the companies, which are big names in the big world of Data Lake.


When we organise this data with the help of these technologies, this kind of organised big data is known as Data Warehouse. To make it more functional, we put it in appropriate buckets. A complete organised set of big data, from which we can derive appropriate strategy for a company or a product is called as Data Warehouse. It is properly used in Information Technology and Business. Snowflake, Yellowbrick and Teradata are some of the names, who are the big names in the big world of Data Warehouse.


जैसे-जैसे तकनीक का प्रयोग बढ़ता जा रहा है, हम आधुनिक युग की तरफ़ बढ़ रहे हैं। लेकिन इस बदलते दौर में जो हमें दौड़ में सबसे आगे रख सकता है, वह है डाटा। डाटा न केवल आपको किसी प्रोडक्ट के बारे में महत्त्वपूर्ण जानकारी देता है, बल्कि उन अनसुलझे रहस्यों से भी मिलाता है, जो हमारे प्रोडक्ट को दूसरों से बेहतर बना सकता है। डाटा वेयरहाउस और डाटा लेक दो ऐसे बिन्दु हैं, जो डाटा को समझने में हमारी मदद कर सकते हैं।

सबसे पहले बात करते हैं डाटा लेक की, बिग डाटा की दुनिया में फैला हुआ एक बड़ा सा चंक, जो अपने आप में अव्यवस्थित है, डाटा लेक कहा जा सकता है। इस बिग डाटा को अपने हिसाब से व्यवस्थित करने के लिए हम डाटा साइंस का उपयोग करते हैं, और इस डाटा को व्यवस्थित करते हैं, डाटा को व्यवस्थित करने के बाद हम अपने हिसाब से महत्त्वपूर्ण जानकारी निकाल सकते हैं, जो हमारे प्रोडक्ट और कंपनी के लिए महत्त्वपूर्ण है। हडूप, अज़ूरे और एस 3 की मदद से हम इस डाटा को व्यवस्थित कर सकते हैं।

जब हम इस डाटा को व्यवस्थित कर संयोजित कर देते हैं, तो इसे अपने ज़रूरत के हिसाब से बाँट कर या फिर बिना बाँटे भी ज़रूरी स्थान पर रख देते हैं। इस तरह संपूर्ण रूप से व्यवस्थित डाटा डाटा वेयरहाउस कहलाता है। बिग डाटा के इस भाग को हम अपनी ज़रूरत के हिसाब से उपयोग कर सकते हैं और अपनी ज़रूरत के मुताबिक़ सही प्रोजेक्शन कर सकते हैं। इन्फ़ॉर्मेशन टेक्नोलॉजी और बिज़नेस में इसका बहुत इस्तेमाल होता है। स्नोफ्लेक, यलोब्रिक और टेराडाटा कुछ ऐसी कंपनियाँ हैं, जो इस पर काम कर रही हैं।

- मंगलम् भारत

Location: India
नहीं पहुँचे तुम स्वयं तक, तो सफ़र कैसा। जो दिल ही दिल में दब गया, वो हुनर कैसा।। यूरेका प्रेमी, ख़ुद में और दुनिया भर में ऐसी चीज़ों की खोज में लगा कोई इंसान, जिसे जानकर एनलाइटेनमेंट आ जाए। हम आपको इसी लाइन के इर्द-गिर्द कहीं मिलेंगे। अगर हमको खोजना हो तो ऐसे ही किसी रास्ते पर चल देना।

Popular Posts during last month

Bunked the IIMC final exams but won the heart of the nation. Neelesh Misra journey from Storyteller to the Founder of a rural newspaper Gaon Connection.

By
Image
“I was the only student in IIMC who didn’t appear in the final examination but got the degree.” “The story which won Ramnath Goenka Award started from just 10 Rs. RTI.” Most loved Storyteller and a journalist who paved his own path and showed the nation a different side of journalism by his newspaper Gaon Connection. ( For Hindi Readers ) Neelesh Misra. Image credit- Internet Neelesh Misra shared his journey from being a field reporter to a founder of the first Indian rural newspaper in an interview. Question- You’ve been in the field of journalism since  1990 . How different do you find being a founder member of a newspaper from being a journalist? Answer- You don’t have any set boundaries. Being a founder member, it gives you a certain, subtle kind of independence. This way we can work as honest journalists. Problems if any, are financial. To run a newspaper without compromising values is the toughest challenge and has been the roughest part of this journey! You...
Read more

खुला ख़त, आपकी (ज़ीरो बटे सन्नाटा) इण्टरनेट स्पीड के नाम

By
Image
खुला   ख़ त ,   आपकी  ( ज़ीरो  बटे  सन्नाटा )   इण्टरनेट  स्पीड   के   नाम                     नमस्कार !!!   खुला  ख़त  पिछले  कुछ  समय  से  ट्रेंड  पर  चल  रहा  है।  मुख्यतः  ये  ख़त  किसी  (गैर)  ज़िम्मेदार  संस्था  को  उससे  त्रस्त  एक  अस्तित्त्वहीन(मान  लो)  मानुस  के  बीच  संवाद  स्थापित  करने  का  साधन  होता  है,  जिसको  (गैर)  ज़िम्मेदार  संस्था  को  छोड़कर  बाकी  सब  पढ़  लेते  हैं।  आज  अपनी  ज़िन्दगी  से  त्रस्त  होकर  मैंने  भी  एक  खुला  ख़त  लिखने  की  कोशिश  की  है।  प्रतिक्रिया  दें।     ...
Read more

10 रुपए की आरटीआई से रामनाथ गोयनका अवॉर्ड तक- नीलेश मिसरा इंटरव्यू- भाग 1

By
Image
"मैं अकेला ऐसा विद्यार्थी था, जिसने आईआईएमसी की फाइनल परीक्षा नहीं दी थी, उसके बाद भी संस्थान ने मुझे डिग्री दी।" "रामनाथ गोयनका पुरस्कार की कहानी की शुरूआत महज़ 10 रुपए की आरटीआई से शुरू हुई थी।" पत्रकार से गीतकार और अब गाँव कनेक्शन के संस्थापक सदस्य नीलेश मिस्रा ने साक्षात्कार में कुछ नई बातें साझा कीं। ( For English Readers ) साभार- इण्टरनेट प्रश्न- 1990 से आप पत्रकारिता के क्षेत्र में हैं। एक पत्रकार होने और अखबार के संचालक होने के रूप में कितना अंतर महसूस करते हैं। उत्तर- अखबार का संचालक होने पर किसी प्रकार का दबाव नहीं है। एक प्रकार की आज़ादी का एहसास होता है। यहां से ईमानदारी की पत्रकारिता कर सकते हैं। समस्याएं हैं तो आर्थिक। लम्बे समय तक चला पाना और बिना समझौते किये चला पाना सबसे मुश्किल है। इस लिहाज़ से बहुत मुश्किल यात्रा रही है। सोंचते रहना पड़ता है कि कैसे चला पाएंगे। प्रश्न- बतौर पत्रकार दूसरे संस्थानों में किस प्रकार का दबाव था , जो आप पर गांव कनेक्शन में नहीं है। उत्तर- दूसरे संस्थानों में भी मुझे किसी समस्या क...
Read more