کاروبار کس طرح بڑی ڈیٹا مارکیٹ کا احساس دلاسکتے ہیں

کاروباری اداروں کو اس بات کا کوئی فائدہ نہیں ملتا ہے کہ ان کا انفراسٹرکچر کس حد تک موثر انداز میں چلتا ہے یا وہ اپنے جمع کردہ تمام بگ ڈیٹا کو کتنا اونچا بنا سکتا ہے۔ اعداد و شمار کی تخلیق کرنے والے تجزیات اور ذہانت کا معیار کیا ہے۔

پچھلے کئی سالوں میں ، ہڈوپ وہ لفظ ہے جو اعداد و شمار کی کھپت ، پروسیسنگ اور تبدیلی کا سب سے مترادف ہوگیا ہے۔ تقسیم شدہ ڈیٹا اسٹوریج اور پروسیسنگ کے لئے اس اوپن سورس فریم ورک نے اپنی انٹرپرائز کی جگہ تیار کی ہے اور تمام بڑے کلاؤڈ پلیٹ فارمز میں اپنا راستہ مربوط کردیا ہے۔ ہڈوپ بات کرنے کے قابل واحد بگ ڈیٹا ٹکنالوجی سے دور ہے ، لیکن یہ وہی ہو گیا ہے جس پر بہت سے دوسرے تعمیر کیے گئے ہیں۔

کاروباری اداروں کے لئے مسئلہ یہ ہے کہ ہڈوپ کی جگہ تقسیم اور ٹولنگ کے اختیارات سے بھری ہوئی ہے ، اور جیسا کہ گارٹنر ریسرچ کے ڈائریکٹر نک ہیڈیککر نے وضاحت کی ، ان میں سے بہت سارے ایک جیسے نظر آتے ہیں۔ ہیوڈیکر ، جس کی تحقیق میں انفارمیشن مینجمنٹ کا احاطہ کیا گیا ہے جس میں بگ ڈیٹا اور نمبر ایس کیو ایل کی جگہیں شامل ہیں ، نے کہا اگر آپ عام ڈیٹا پروسیسنگ کے آپشنز پر نظر ڈال رہے ہیں تو بہت سارے وینڈرز اسی طرح کی خصوصیات پیش کرتے ہیں۔

مارکیٹ کو توڑ رہا ہے

کلوروڈرا ، ہارٹن ورکس ، اور میپآر three میں تین اہم خالص پلے ہڈوپ اسٹارٹ اپس ہیں اور وہ سب 2015 میں مستقل طور پر بڑھے ہیں۔ گارٹنر کے مطابق ، ہر ایک کے پاس تقریبا 700 700 گاہک ہیں ، وہ 10 فیصد دیتے ہیں یا لیتے ہیں ، جس سے عالمی منڈی میں فرق پڑتا ہے۔ 2،100-2،400 دنیا بھر میں ہاڈوپ صارفین یہ تینوں اپنے ہڈوپ تقسیم کے ایک مفت درجے اور انٹرپرائز درجے کی پیش کش کرتے ہیں ، اور ہر ایک اپاچی سافٹ ویئر فاؤنڈیشن (اے ایس ایف) بینر کے تحت منصوبوں میں نمایاں اوپن سورس کی شراکت کرتا ہے۔

ہیوڈیکر نے کہا ، "ہمارے اعداد و شمار سے ظاہر ہوتا ہے کہ فی الحال ہڈوپ کا 44 فیصد استعمال بلا معاوضہ ہے۔" "کیا کوئی واضح رہنما ہے؟ مجھے ایسا نہیں لگتا۔ وہ سب مارکیٹ شیئر پر قبضہ کر رہے ہیں کیونکہ یہ بہت نئی جگہ ہے۔"

پچھلے چند مہینوں میں ، ان تینوں کے مابین بیشتر مقابلہ ڈیٹا تجزیاتی صلاحیتوں اور اپاچی اسپارک کو مربوط کرنے کے تخلیقی طریقوں پر مقابلہ کرنے کے لئے اتر آیا ہے ، ایک اوپن سورس بگ ڈیٹا پروسیسنگ انجن جس میں ریئل ٹائم ڈیٹا اسٹریمز سے لے کر مشین لرننگ تک کے معاملات ہیں۔ . حال ہی میں میپآر نے ہڈوپ ، چنگاری پر مبنی اسٹریم پروسیسنگ ، اور تجزیات کو مربوط کرنے والے "کنورجڈ ڈیٹا پلیٹ فارم" کے حصے کے طور پر میپآر اسٹریمز کا اعلان کیا۔ ہارٹون ورکس نے ہارٹ ورک ورکس ڈیٹا پلیٹ فارم (ایچ ڈی پی) میں ایک یادداشت شامل ہے جس میں میموری اسپارک تجزیات موجود ہیں ، اور کلوڈیرہ اسپرک ٹریننگ کلاسز کی پیش کش کے ساتھ اپنے ون پلیٹ فارم انیشی ایٹو کے ذریعہ متعدد اوپن سورس اسپارک انضمام پیش کرتا ہے۔

ہیوڈیکر نے وضاحت کی ، "انفارمیشن مینجمنٹ اور انفارمیشن انفراسٹرکچر خالی جگہوں میں بہت کچھ ہو رہا ہے ، اور یہ سب ہڈوپ نہیں ہے۔" "اسپارک کی رفتار اور میموری مرکوز پر مبنی ڈیٹا پروسیسنگ ماڈل کے پیچھے زبردست رفتار ہے ، حالانکہ اسپارک کی ترقی اب بھی ابتدائی مراحل میں ہے۔ اسپارک اس سے کہیں زیادہ SQL کی طرح ڈیٹا پروسیسنگ میں ایک اور لینگوا فرانکا ہوگا ، اور یقینی طور پر اس کی علامت ظاہر کررہی ہے کہ اس کی کچھ ٹانگیں ہیں کیونکہ زیادہ سے زیادہ کمپنیاں اس میں سرمایہ کاری کرتی ہیں۔ "

ہیوڈیکر نے بگ ڈیٹا میں کلاؤڈ پلیئرز کی اہمیت پر بھی روشنی ڈالی۔ ٹیک کمپنیاں جنہوں نے ہڈوپ اور دیگر بگ ڈیٹا ٹکنالوجیوں کو ان کے موجودہ انفراسٹرکچر بطور خدمت (آئی اے اے ایس) کی پیش کشوں میں مربوط کیا ہے۔

ایمیزون ویب سروسز (AWS) کلاؤڈ بیسڈ ہڈوپ آرکیسٹریشن کے لئے اپنی ایمیزون لچکدار میپریڈوس (EMR) سروس استعمال کرتی ہے۔ مائیکروسافٹ اپنے ایزور کلاؤڈ پلیٹ فارم میں بگ ڈیٹا خدمات کی ایک پوری میزبان پیش کرتا ہے ، اس نے ایچ ڈی آئنسائٹ سروس پر اپاچی ہڈوپ ، اسپارک ، ایچ بیس ، اور طوفان کا انتظام کرنے کے ل H ، اس کے ایس کیو ایل پر مبنی ایزور ڈیٹا لیک اور ایزور ڈیٹا اینالیٹکس کے ساتھ مل کر بگ ڈیٹا خدمات پیش کی ہیں۔ آئی بی ایم کے پاس اپنے آن پریمیسس آئی بی ایم اوپن پلیٹ فارم کی پیش کش ہڈوپ اور آئی بی ایم بگ انائٹس کے ل offering ہے ، اس کے اوپر چلانے کے لئے ایک تجزیاتی پیکیج ، اس کے ساتھ ساتھ بلیو مکس کلاؤڈ میں منیجڈ ہڈوپ اور اپاچی اسپرک کے طور پر خدمت بھی ہے۔ فہرست جاری ہے ، اور کاروباری افراد بادل میں زیادہ سے زیادہ قابل اطلاق استعمال کیسز ڈھونڈتے ہیں۔

ہیوڈیکر نے کہا ، "ہمارا اندازہ ہے کہ صرف ڈبلیو ایس کے ہی قریب customers has customers has صارفین ہیں ، لہذا مشترکہ خالص ڈراموں کے کسٹمر بیس سے دوگنا ہوچکے ہیں۔" "بادل میں جانے کا ایک فائدہ یہ ہے کہ آپ کو ایکو سسٹم مل جائے۔ آپ کسی بھی IAAS پرساد پر خالص پلے ہڈوپ تقسیم حاصل کرسکتے ہیں۔ میپ آر ان تمام بادلوں میں دستیاب ہے ، جن کے بارے میں آپ سوچ سکتے ہو ، IBM کے علاوہ ، ایک ہی ہے۔ کلوڈیرا اور ہارٹ ورک ورکس کیلئے۔ ہم نے نہیں دیکھا ہے کہ بادل کی دستیابی کسی وینڈر اور دوسرے کے مابین انتخاب کرتے وقت بہت زیادہ عنصر کی حیثیت اختیار کرتی ہے۔ "

انٹرپرائز ڈیٹا اسٹریٹجی کا انتخاب

چھوٹے سے چھوٹے کاروبار (ایس ایم بی) اور بڑھتے ہوئے انٹرپرائز کاروبار دونوں کے ل data ، جب ڈیٹا پروسیسنگ اور تجزیات کے حل میں سرمایہ کاری کرتے ہیں تو ، ہیوڈیکر نے کہا کہ فیصلہ کن عنصر وہ ہے جو پلیٹ فارم اعلی ترین سطح کی خدمت مہیا کرسکتا ہے۔ گارٹنر کے مطابق ، کاروبار کے لئے سب سے بڑا چیلنج یہ ہے کہ مہارت کا فرق - یہ معلوم کرنا کہ پلیٹ فارم کے انسٹال اور تعینات ہونے کے بعد اسے کون منظم کرے گا۔

"اگر کمپنیاں ڈیٹا پلیٹ فارم کے ساتھی کی تلاش کر رہی ہیں تو ، کون ان کے ساتھ اعداد و شمار کو روکنے میں مدد فراہم کرے گا؟ تجزیاتی ایپلیکیشن بنانے میں کون ان کی مدد کرے گا؟ جہاں تک تین خالص پلے ہڈوپ ایرس کی بات ہے تو ، تشخیص کا معیار چاروں طرف ہی ہے مینجمنٹ ٹولز اور کنسولز ، ڈیٹا گورننس ٹولز ، اور کارکردگی کی پختگی۔ "

ہڈوپ پلیٹ فارم کا انتخاب کرنے کا دوسرا دلچسپ پہلو وفاداری کا فقدان ہے۔ کمپنیاں اپنے ہڈوپ پلیٹ فارم کا ہر 6-12 ماہ میں اکثر جائزہ لیتے ہیں تاکہ معلوم کریں کہ آیا ڈیٹا پروسیسنگ کے اجزاء ابھی بھی صحیح فٹ ہیں ، کیوں کہ اس جگہ کی رفتار کتنی تیزی سے بدل رہی ہے اور بڑے کھلاڑیوں نے خود کو کتنا کم فرق کیا ہے۔ ہیوڈیکر نے کہا کہ 20 فیصد کمپنیوں نے جن کے بارے میں بات کی ہے وہ اپنے ڈیٹا سینٹرز یا کلاؤڈ میں متعدد ہڈوپ تقسیم چلارہے ہیں ، یا تو مختلف ٹیموں کو ان کا انتخاب کا پلیٹ فارم چننے کی اجازت دی جائے یا جان بوجھ کر متنوع شکل دی جائے تاکہ صرف ایک ہی ہڈوپ تقسیم سے پھنس جانے سے بچ جائے۔

اس طرح کے متنوع پلیٹ فارم پورٹ فولیو میں ، جو گارٹنر ریسرچ کے نائب صدر اور ڈیجیٹل حکمت عملی پر فوکس کرنے والے ممتاز تجزیہ کار ، فرانک بائٹینڈ ایجک کی مدد کرتا ہے ، "معلومات کو ایک اثاثہ کی حیثیت سے کہتے ہیں۔" جیسے آپ سرمایہ ، محنت ، ماد materialsہ اور جسمانی یا ورچوئل سہولیات کے بغیر کاروبار نہیں چلا سکتے ، بائٹینڈجک نے کہا کہ آپ معلومات کے بغیر کاروبار نہیں چلا سکتے۔

"ہم کاروبار کو تین بہاؤوں کے لحاظ سے دیکھنا چاہتے تھے: بنیادی بہاؤ سامان تھا ، ثانوی بہاؤ پیسہ تھا ، اور تیسرا بہاؤ یہ جانکاری تھا کہ سامان اور پیسہ ایک دوسرے سے جڑا ہوا ہے۔ اب زیادہ تر کاروبار میں یہ دوسرے راستے کی طرح ہے۔ "بنیادی بہاؤ معلومات ، شناخت اور ترتیب سے لے کر مشمولات کی مارکیٹنگ وغیرہ تک ہے۔ چاہے آپ اس کو بڑا ڈیٹا کہتے ہیں یا نہیں ، واقعی اس سے کوئی فرق نہیں پڑتا ہے۔"

"بگ ڈیٹا" پرانا ہے

بائٹینڈجک نے کہا کہ وہ بگ ڈیٹا کو کاروبار کے ل for ایک علیحدہ ٹکنالوجی کی حیثیت سے نہیں دیکھتا ، بلکہ آپ کی مجموعی ڈیجیٹل حکمت عملی میں ایک تھیم یا ذہنیت کے بطور ہے۔

"میں ڈیٹا کی بڑی حکمت عملی رکھنے میں یقین نہیں رکھتا ،" بائینڈیجک نے کہا۔ "ڈیجیٹل اجزاء کے بغیر شاید ہی کوئی کاروبار کی حکمت عملی ہوسکتی ہے ، لہذا میں ایک ایسی ڈیجیٹل حکمت عملی رکھنے میں یقین رکھتا ہوں جس میں ہر طرح کی ٹکنالوجی اہم صلاحیتوں کی فراہمی کرتی ہے۔ اس میں موبائل ، سماجی ، کلاؤڈ ، آئی او ٹی ، سمارٹ مشینیں اور بگ ڈیٹا شامل ہیں۔"

ہیوڈیکر کا خیال ہے کہ ہم "بگ ڈیٹا" کے بارے میں کم اور کم بات کرنا شروع کردیں گے ، کیونکہ اب صرف اعداد و شمار ہیں۔ یہ جس طرح سے کاروبار ہوتا ہے۔ بڑے پیمانے پر حجم اور اعداد و شمار کی تیز رفتار اب جتنی بھی مشکوک نہیں ہے۔

ہیوڈیکر نے کہا ، "معلومات اور تجزیات کے ذریعہ بگ ڈیٹا ایک بار پھر استعمال ہورہا ہے۔ "بگ ڈیٹا کیٹیگری میں واضح طور پر فرق نہیں ہے۔ ہم سے ہمیشہ بگ ڈیٹا مارکیٹ کا سائز پوچھا جاتا ہے ، لیکن اس کا کیا مطلب ہے؟ بگ ڈیٹا واقعی میں ایک مارکیٹ نہیں ہے ، یہ ایک تصور ہے۔ ایک کاروبار کے لئے ، بگ ڈیٹا کے بارے میں سوچنا کچھ انوکھی اور خاص بات جو اس سے بالکل مختلف ہے جو آپ نے پہلے کیا ہے وہ ایک غلطی ہے۔ اس مقام پر ، اعداد و شمار بالکل معمول کی بات ہیں۔ "