একটি মনোলিথিক একক প্রচেষ্টার সমাপ্তি
SAP এবং Databricks একটি কৌশলগত অংশীদারিত্বের মধ্যে রয়েছে, এবং Databricks খুব কমই তার ভাগ্যকে বিশ্বাস করতে পারে: এই অংশীদারিত্বের মাধ্যমে, Databricks শুধুমাত্র বিশ্বব্যাপী দৃশ্যমানতা অর্জন করছে না বরং SAP-এর বিদ্যমান গ্রাহক বেসে একচেটিয়া অ্যাক্সেসও পাচ্ছে। ডাটাব্রিক্সের বিক্রয় একটি বড় উত্সাহ পেয়েছে।
অনেক বছর আগে কোয়াট্রিক্সের অবস্থাও একই ছিল। Qualtrics হল একটি US-ভিত্তিক সফটওয়্যার কোম্পানি যা এন্টারপ্রাইজ ফিডব্যাক ম্যানেজমেন্টে বিশেষজ্ঞ। 2018 থেকে 2023 পর্যন্ত, এটি জার্মান সফ্টওয়্যার সমষ্টি SAP এর অংশ ছিল। এই সময়ের মধ্যে মূল্য বৃদ্ধির কারণে, SAP একটি আর্থিক লাভের সাথে পরিকল্পিত অধিগ্রহণ থেকে বেরিয়ে আসতে সক্ষম হয়েছিল। প্রযুক্তিগত এবং সাংগঠনিকভাবে, সহযোগিতা কখনই কার্যকর হয়নি, কিন্তু কোয়ালট্রিক্স অনেক বিদ্যমান গ্রাহকদের সাথে দরজা খোলার জন্য SAP-এর সাথে তার অংশীদারিত্ব ব্যবহার করতে যথেষ্ট সচেতন ছিল। এখন Databricks এই সুবিধাজনক অবস্থানে নিজেকে খুঁজে পায়। ডেটা ম্যানেজমেন্টে প্রযুক্তিগত অগ্রগামী SAP-এর জন্য বিশ্বব্যাপী মনোযোগ আকর্ষণ করছে। প্রায় 3,000 দর্শক নভেম্বরের শুরুতে মিউনিখে একটি ডেটাব্রিক্স সম্মেলনে যোগ দিয়েছিলেন।
SAP এবং ডেটা ইন্টেলিজেন্স বিশেষজ্ঞ ডাটাব্রিক্সের মধ্যে সম্প্রসারিত অংশীদারিত্বের ঘোষণা SAP-এর ERP ডেটা আর্কিটেকচারের সাম্প্রতিক ইতিহাসে সবচেয়ে উল্লেখযোগ্য পরিবর্তনগুলির একটি হিসেবে চিহ্নিত করেছে৷ বছরের পর বছর ধরে, সফ্টওয়্যার কোম্পানিটি উচ্চাভিলাষী ইন-হাউস ডেভেলপমেন্ট যেমন SAP ডেটা হাবের মাধ্যমে জটিল ডেটা ইন্টিগ্রেশন এবং বড় ডেটা পরিস্থিতি মোকাবেলা করার চেষ্টা করেছিল — এমন একটি প্রচেষ্টা যা প্রায়শই প্রযুক্তিগত জটিলতা, বিপুল সম্পদ খরচ এবং খরচ-কার্যকারিতার অভাবের কারণে ব্যবহারকারী কোম্পানিগুলির দৈনন্দিন কার্যক্রমে ব্যর্থ হয়।
এসএপি ডেটা ওয়ারহাউস ক্লাউডের মধ্যবর্তী ধাপের মাধ্যমে, এসএপি অবশেষে এসএপি ডেটাস্ফিয়ারে পৌঁছেছে এবং বিজনেস ডেটা ক্লাউড (এসএপি বিডিসি) নামে পরিচিত ওভারআর্চিং সলিউশন বান্ডিল। বিশ্লেষণাত্মক দৃষ্টিকোণ থেকে, Databricks-এর সাথে অংশীদারিত্ব SAP-এর শীর্ষ ব্যবস্থাপনার একটি আনুষ্ঠানিক স্বীকারোক্তি যে কোম্পানিটি বছরের পর বছর ধরে বিগ ডেটা, ডেটা ইঞ্জিনিয়ারিং, এবং মাস্টার ডেটা ম্যানেজমেন্টের ক্ষেত্রগুলিকে উপেক্ষা করেছে এবং আধুনিক ডেটা লেকহাউস প্ল্যাটফর্মগুলির উচ্চ উদ্ভাবনী কম্পিউটিং শক্তি আর নিজেরাই প্রদান করতে পারে না।
বিদ্যমান SAP গ্রাহকদের জন্য, যাইহোক, এই জোটের অর্থ অনমনীয়, পূর্বনির্ধারিত ERP মনোলিথগুলি থেকে একটি লক্ষণীয় স্বস্তি। মালিকানাধীন সাইলোগুলিতে ব্যবসা-সমালোচনামূলক ডেটা লক করার পরিবর্তে, SAP Databricks-এর বাজার-নেতৃস্থানীয় ডেটা ইন্টেলিজেন্স প্ল্যাটফর্মে খুলছে। যখন SAP S/4 Hana, SuccessFactors, বা Concur থেকে ব্যবসায়িক প্রেক্ষাপটে শব্দার্থিক সার্বভৌমত্ব দাবি করে চলেছে, Databricks স্কেলযোগ্য বিশ্লেষণ ইঞ্জিন, Apache Spark ভিত্তিক ডেটা ইঞ্জিনিয়ারিং এবং মেশিন লার্নিং (ML) এবং কৃত্রিম বুদ্ধিমত্তার জন্য উন্নত পরিবেশে অবদান রাখে। SAP এবং Databricks এইভাবে লেনদেনমূলক ব্যবসায়িক সফ্টওয়্যার এবং ভবিষ্যত-ভিত্তিক AI ডেটা প্রক্রিয়াকরণের মধ্যে মিথস্ক্রিয়াকে মৌলিকভাবে পুনরায় সংজ্ঞায়িত করছে।
উন্মুক্ততা এবং এন্টারপ্রাইজ লেকহাউসের দিকে বিবর্তন
গ্লোবাল ডেভেলপার কনফারেন্সে, বিশেষ করে বার্লিনে SAP TechEd, SAP Databricks এর সাথে তার অংশীদারিত্বের কৌশলগত গুরুত্বের উপর জোর দিয়েছে। বিডিসি ডেভেলপারদের কাছে একটি বিচ্ছিন্ন স্বতন্ত্র পণ্য হিসাবে উপস্থাপন করা হয়নি, বরং একটি খোলা, ক্রস-ক্লাউড ডেটা ইকোসিস্টেম (বিজনেস ডেটা ফ্যাব্রিক) হিসাবে বিচ্ছিন্নভাবে ভিন্ন ভিন্ন ডেটা ল্যান্ডস্কেপগুলিকে একীভূত করার জন্য ডিজাইন করা হয়েছে। TechEd-এ, SAP স্পষ্ট করেছে যে তথাকথিত শূন্য-কপি নীতি এবং ওপেন-সোর্স ডেল্টা শেয়ারিং প্রোটোকলের মাধ্যমে ডেটাব্রিক্সের সরাসরি একীকরণ সময়সাপেক্ষ ডেটা অনুলিপি এবং প্রতিলিপির ঐতিহাসিক প্রয়োজনীয়তার অবসান ঘটায়।
এছাড়াও, SAP বার্লিন সম্মেলনে বিডিসিকে একটি এন্টারপ্রাইজ লেকহাউসে আরও বিকাশের জন্য তার প্রতিশ্রুতি পুনর্ব্যক্ত করেছে। ডেটা বিশেষজ্ঞ ড্রেমিওর অধিগ্রহণের মতো কৌশলগত পদক্ষেপের মাধ্যমে, SAP অ্যাপাচি আইসবার্গ এবং ওপেন ক্যাটালগ স্ট্যান্ডার্ড Apache Polaris-এর জন্য নেটিভ ইন্টারফেস অন্তর্ভুক্ত করতে তার বিদ্যমান ডেল্টা লেক সমর্থনকে প্রসারিত করছে। বার্লিনের TechEd-এ, বিদ্যমান গ্রাহকদের প্রতিশ্রুতি দেওয়া হয়েছিল যে SAP এবং নন-SAP উত্স থেকে ডেটা ভবিষ্যতে Apache Parquet-এর মতো উন্মুক্ত ফর্ম্যাটে থাকতে পারে, যখন বিতরণ করা SQL কোয়েরি ইঞ্জিন এবং AI মডেলগুলি সময় সাপেক্ষ ETL ক্যাসকেড ছাড়াই সরাসরি এটি অ্যাক্সেস করবে।
SAP BDC, নলেজ গ্রাফ, এবং ডেটাব্রিক্স
SAP বিজনেস ডাটা ক্লাউড হল SAP-এর ব্যাপক সমাধান এবং লাইসেন্সিং ধারণা। এটি SAP ডেটাস্ফিয়ার (অর্থবোধক মডেলিং এবং ডেটা ক্যাটালগিংয়ের জন্য), SAP অ্যানালিটিক্স ক্লাউড (প্রতিবেদন এবং সমন্বিত পরিকল্পনার জন্য), এবং ব্যক্তিগত ক্লাউড সংস্করণে SAP BW বান্ডেল করে।
বর্তমানে দুটি অপারেশনাল ভেরিয়েন্ট রয়েছে: SAP Databricks হল SAP থেকে সম্পূর্ণরূপে পরিচালিত SaaS উপাদান যা সরাসরি BDC-তে এম্বেড করা হয় এবং SAP চুক্তির মাধ্যমে বিল করা হয়। বিপরীতে, এন্টারপ্রাইজ ডেটাব্রিক্স (নেটিভ ডেটাব্রিক্স নামেও পরিচিত) কোম্পানিগুলি দ্বারা সরাসরি হাইপারস্কেলারের পরিকাঠামো যেমন Microsoft Azure, Amazon Web Services (AWS), বা Google ক্লাউড প্ল্যাটফর্ম (GCP) দ্বারা পরিচালিত হয়। জার্মানির প্রাক্তন এসএপি ব্যবস্থাপনা পরিচালক ড্যানিয়েল হোলজের একটি বিবৃতি অনুসারে এবং এখন সেন্ট্রাল ইউরোপের ডেটাব্রিক্স ভাইস প্রেসিডেন্ট, নেটিভ ডেটাব্রিক্স এবং এসএপি বিডিসির ডেটাব্রিক্স উপাদান 2027 সালের প্রথম ত্রৈমাসিক থেকে সমতুল্য কার্যকারিতা শুরু করবে বলে আশা করা হচ্ছে। লাইসেন্সিং সামঞ্জস্য বা বিক্রয় সংক্রান্ত কোনও বিবরণ এই সময়ে উপলব্ধ ছিল না। ড্যানিয়েল হোলজ নভেম্বরের শুরুতে মিউনিখে অনুষ্ঠিত ডেটাব্রিক্সের নিজস্ব ইভেন্ট, ডেটাব্রিক্স ডেটা প্লাস এআই ওয়ার্ল্ড ট্যুরে এই ঘোষণা করেছিলেন।
BDC এবং Databricks এর মধ্যে প্রযুক্তিগত ইন্টারফেস ডেল্টা শেয়ারিং প্রোটোকলের উপর ভিত্তি করে। অপারেশনাল SAP সিস্টেম থেকে প্রাপ্ত ডেটা পণ্যগুলি BDC ক্যাটালগে উপলব্ধ করা হয় এবং ডেটার ফিজিক্যাল কপি তৈরি না করেই ডেল্টা শেয়ারিংয়ের মাধ্যমে ডেটাব্রিক্স ইউনিটি ক্যাটালগে দৃশ্যমান করা হয়। ডেটা বিশেষজ্ঞরা পাইথন, SQL, বা R ব্যবহার করে জটিল AI মডেলগুলিকে Databricks নোটবুকে প্রশিক্ষণ দিতে পারেন এবং নির্বিঘ্নে সমৃদ্ধ মডেলের ফলাফলগুলি ডেল্টা শেয়ারের মাধ্যমে BDC এবং SAP ডেটাস্ফিয়ারে ফেরত দিতে পারেন৷
SAP নলেজ গ্রাফ প্ল্যাটফর্মের শব্দার্থিক মস্তিষ্ক হিসাবে কাজ করে। এটি S/4HANA থেকে হাজার হাজার রিলেশনাল টেবিল এবং লক্ষ লক্ষ ডেটা ফিল্ডকে নোড এবং প্রান্ত সমন্বিত একটি মেশিন-পাঠযোগ্য নেটওয়ার্ক মডেলে অনুবাদ করে। Databricks অসংগঠিত বড় তথ্য প্রক্রিয়াকরণ এবং মডেল প্রশিক্ষণ পরিচালনা করে, জ্ঞান গ্রাফ ব্যবসার প্রসঙ্গ প্রদান করে। এটি জেনারেটিভ এআই মডেল, স্বায়ত্তশাসিত এজেন্ট এবং জুল কোপাইলটকে সাধারণ লেজারে স্টোকাস্টিক হ্যালুসিনেশন রোধ করতে সুনির্দিষ্ট প্রাসঙ্গিক তথ্য সরবরাহ করে।
একটি ডেটা লেকহাউসের পক্ষে ঐতিহ্যগত ডেটা গুদামের সমাপ্তি৷
SAP এবং Databricks এর মধ্যে অংশীদারিত্ব ঐতিহ্যগত ডেটা গুদাম স্থাপত্যের পতনকে ত্বরান্বিত করছে। প্রথাগত এন্টারপ্রাইজ ডেটা গুদামগুলি (যেমন উত্তরাধিকারী SAP BW বা সম্পূর্ণরূপে রিলেশনাল SQL ডেটা গুদামগুলি) যখন একটি একক প্ল্যাটফর্মে অসংগঠিত ডেটা, রিয়েল-টাইম স্ট্রিমিং এবং মেশিন লার্নিং প্রক্রিয়াকরণের ক্ষেত্রে আসে তখন ক্রমবর্ধমানভাবে অপ্রতিরোধ্য কর্মক্ষমতা সীমাতে পৌঁছে যায়৷
Data Lakehouse, Databricks দ্বারা উকিল হিসাবে, ACID লেনদেনের গ্যারান্টি, ডেটা গুণমান এবং ঐতিহ্যগত ডেটা গুদামগুলির অনুসন্ধানের গতির সাথে নমনীয় ডেটা লেকের সীমাহীন, সাশ্রয়ী স্টোরেজ ক্ষমতাকে একত্রিত করে। ভবিষ্যতে SAP ডেটা আর্কিটেকচারে, কাজের বন্টন নাটকীয়ভাবে পরিবর্তন হবে।
SAP ডেটাস্ফিয়ারকে বড় ডেটার জন্য একচেটিয়া, সর্ব-উদ্দেশ্য ডেটা স্টোর হওয়ার ধারণা ত্যাগ করা উচিত। পরিবর্তে, ডেটাস্ফিয়ার একটি যৌক্তিক, ভার্চুয়াল স্তর (বিজনেস ডেটা ফ্যাব্রিক) হিসাবে কাজ করে যা ব্যবসায়িক প্রক্রিয়া এবং অনুমোদনের নিয়মগুলির উপর শব্দার্থিক নিয়ন্ত্রণ বজায় রাখে।
ভ্যালু ডেটাব্রিক্স এসএপি ডেভেলপারদের কাছে নিয়ে আসে
ডেটাব্রিক্স এইভাবে কম্পিউট-ইনটেনসিভ এক্সিকিউশন লেয়ার (কম্পিউট লেয়ার) দখল করে। লেকহাউসে সঞ্চয়স্থান এবং কম্পিউটিং শক্তির কঠোর পৃথকীকরণের জন্য ধন্যবাদ, ডেটা ইঞ্জিনিয়ারিং ওয়ার্কলোড এবং এআই প্রশিক্ষণ প্রক্রিয়াগুলি অপারেশনাল ইআরপি সিস্টেম বা ডেটাস্ফিয়ার ইনস্ট্যান্সের উপর বোঝা না রেখে চরম মাত্রায় স্কেল করা যেতে পারে। বিদ্যমান SAP গ্রাহকদের জন্য, এর অর্থ হল প্রথাগত ETL (Extract, Transform, Load) দৃষ্টান্ত থেকে ফেডারেশন এবং এন্টারপ্রাইজ ডেটার ভার্চুয়ালাইজেশনের দিকে একটি নির্দিষ্ট স্থানান্তর।
জিরো-কপি শেয়ারিং সময়সাপেক্ষ, ত্রুটি-প্রবণ ETL প্রক্রিয়াগুলিকে দূর করে। এটি বিকাশের সময় বাঁচায়, প্রতিলিপির সময় ত্রুটির সম্ভাবনা হ্রাস করে এবং স্টোরেজ খরচ কমায়। ডেভেলপারদের আর লিগ্যাসি SAP টুলের সীমিত বিশ্লেষণী ক্ষমতার জন্য স্থির থাকতে হবে না; পরিবর্তে, তারা আধুনিক প্রো-কোড পরিবেশ, অ্যাপাচি স্পার্ক, এমএলফ্লো এবং স্থানীয় মাল্টি-ইউজার সাপোর্ট সহ স্ট্যান্ডার্ড জুপিটার নোটবুক ব্যবহার করতে পারে। S/4 থেকে অপারেশনাল ডেটা সরাসরি লেকহাউসে অসংগঠিত IoT সেন্সর ডেটা, CRM তথ্য, বা বাহ্যিক বাজার বিশ্লেষণের সাথে একত্রিত করা যেতে পারে।
ক্রিটিকাল ডাউনসাইডস এবং ব্যবসায়িক ক্ষতি
"ব্যবসায়িক ডেটা জটিলতা" হিসাবে বিডিসির ঝুঁকি: জার্মান-ভাষী এসএপি ব্যবহারকারী গ্রুপ (ডিএসএজি) এবং সম্প্রদায়ের সমালোচনামূলক কণ্ঠ কখনও কখনও বিডিসিকে "ব্যবসায়িক ডেটা জটিলতা" হিসাবে বিদ্রুপ করে লেবেল করে৷ এটি অস্বচ্ছ চুক্তির ধারা, জটিল অনুমোদনের মডেল এবং ডেটা স্থানান্তরের সীমাবদ্ধতার কারণে। যারা সরাসরি SAP এর মাধ্যমে SAP Databricks ক্রয় করে তারা BDC পরিবেশ এবং এতে থাকা ক্লাউড ক্যাপাসিটির জন্য অর্থ প্রদান করে। বিলিং ব্যবহার-ভিত্তিক BTP ক্যাপাসিটি ইউনিট বা বিশেষ ক্রেডিট মডেলের উপর ভিত্তি করে, যার অধীনে অব্যবহৃত ক্রেডিট চুক্তি বছরের শেষে প্রতিস্থাপন ছাড়াই মেয়াদ শেষ হয়ে যায়।
মার্সিডিজ এবং BASF-এর মতো কোম্পানি, যারা ইতিমধ্যেই Azure, AWS, বা GCP-এর মতো প্ল্যাটফর্মে একটি প্রতিষ্ঠিত এন্টারপ্রাইজ ডেটাব্রিকস ইন্সট্যান্স পরিচালনা করে, তাদের SAP ডেটাব্রিকের জন্য ডুপ্লিকেট লাইসেন্স কেনার প্রয়োজন নেই। বিডিসি কানেক্ট ইন্টারফেস ব্যবহার করে, একটি বিদ্যমান এন্টারপ্রাইজ ডেটাব্রিক্স ইনস্ট্যান্স ডেল্টা শেয়ারিংয়ের মাধ্যমে সরাসরি SAP BDC-এর সাথে সংযুক্ত করা যেতে পারে। এটি বিডিসি স্টোরেজের অপ্রয়োজনীয় ডুপ্লিকেট ক্রয় এড়ায় এবং বিক্রেতা-আরোপিত সারচার্জ থেকে কোম্পানির স্বাধীনতা রক্ষা করে। SAP এবং Databricks-এর মধ্যে জোট হল একটি বাস্তবসম্মত এবং প্রযুক্তিগতভাবে দীর্ঘ-অপ্রয়োজনীয় পদক্ষেপ যা লেনদেনমূলক SAP বিশ্ব এবং আধুনিক AI লেকহাউস আর্কিটেকচারের মধ্যে বাধাগুলি ভেঙে দেয়। বিদ্যমান SAP গ্রাহকদের জন্য, এটি একটি অত্যন্ত নমনীয় ডেটা ইকোসিস্টেম তৈরি করে। তা সত্ত্বেও, আইটি সিদ্ধান্ত গ্রহণকারীদের অন্ধভাবে বিডিসিকে একটি রেডিমেড প্যানেসিয়া হিসাবে কেনা উচিত নয়, বরং স্থাপত্যটি এমনভাবে ডিজাইন করা উচিত যাতে তাদের নিজস্ব ডেটা সার্বভৌমত্ব সংরক্ষিত হয় এবং ডুপ্লিকেট লাইসেন্সিংয়ের কারণে আর্থিক বিস্ময় এড়ানো যায়।
