หน่วยการสร้างของความสำเร็จ: Data Mesh เหมาะกับองค์กรของฉันหรือไม่?

โดยKendra Billings , Wayne Hiner , Ryan LaPlante , Shailendra PoddarและSiladitya Roy
หากคุณทำงานใกล้กับภาคส่วนเทคโนโลยีหรือธุรกิจ คุณจะทราบดีถึงคุณค่าของข้อมูลในโลกปัจจุบัน นอกจากนี้ คุณน่าจะเคยได้ยินเกี่ยวกับ data mesh ซึ่งเป็นแนวทางใหม่อย่างสิ้นเชิงสำหรับสถาปัตยกรรมข้อมูลที่สามารถเพิ่มมูลค่าของข้อมูลของคุณได้แบบทวีคูณ
ในฐานะผู้นำธุรกิจ คุณต้องการเพิ่มศักยภาพให้กับทีมของคุณด้วยข้อมูลเพื่อสร้างข้อมูลเชิงลึกที่ขับเคลื่อนมูลค่าและการเติบโต ทุกวันนี้ ดาต้าเมชได้รับการวางตำแหน่งอย่างกว้างขวางว่าเป็นโซลูชันสำหรับการทำให้ข้อมูลเป็นประชาธิปไตยในวงกว้าง ขยายการเข้าถึงข้อมูลองค์กรจำนวนมากโดยให้สิทธิ์ความเป็นเจ้าของอยู่ในมือของทีมที่สร้างข้อมูลนั้น
แต่ดาต้าเมชไม่ใช่โซลูชันแบบปลั๊กแอนด์เพลย์ และในบางกรณี การกำหนดมุมมองของคุณบนดาต้าเมชอาจทำให้เสียสมาธิจากความท้าทายทางธุรกิจพื้นฐานของคุณ กล่าวอีกนัยหนึ่ง แม้จะมีศักยภาพที่ดี แต่การใช้สถาปัตยกรรมตาข่ายข้อมูลไม่ได้รับประกันว่าจะเป็นองค์กรที่ขับเคลื่อนด้วยข้อมูลได้อย่างรวดเร็ว และอาจไม่ใช่แนวทางที่ดีที่สุดสำหรับทุกองค์กร
จุดประสงค์ของบทความนี้คือเพื่อช่วยให้คุณเข้าใจว่าตาข่ายข้อมูลเป็นแนวทางที่เหมาะสมสำหรับธุรกิจของคุณหรือไม่และเมื่อใด และนำเสนอข้อมูลเชิงลึกเพื่อการจัดการข้อมูลที่ดีขึ้น ไม่ว่าสถานะปัจจุบันของคุณจะเป็นอย่างไร
ตาข่ายข้อมูลคืออะไรกันแน่?
เมชข้อมูลเป็นกระบวนทัศน์สถาปัตยกรรมข้อมูล ที่ค่อนข้างใหม่ ซึ่งพยายามทำให้ข้อมูลพร้อมใช้งานมากขึ้นและเข้าถึงได้สำหรับผู้ใช้ทางธุรกิจโดยเชื่อมต่อเจ้าของข้อมูล ผู้ผลิตข้อมูล และผู้บริโภคข้อมูลโดยตรงผ่านหลักการชี้นำสี่ประการ :
- ความเป็นเจ้าของ/การออกแบบที่ขับเคลื่อนด้วยโดเมน
- ข้อมูลเป็นผลิตภัณฑ์
- โครงสร้างพื้นฐานข้อมูลแบบบริการตนเอง
- การกำกับดูแลการคำนวณแบบรวมศูนย์

วิธีการนี้มีลักษณะอย่างไรในทางปฏิบัติ? ในหลาย ๆ ด้าน data mesh ก็เหมือนกับเลโก้ คุณสามารถสร้างชุดค่าผสมต่างๆ ได้มากกว่า 915 ล้านชุดจากตัวต่อเลโก้เพียง 6 ตัว ตาข่ายข้อมูลสามารถสร้างในลักษณะเดียวกันด้วยวิธีใดก็ได้ที่เหมาะกับองค์กรของคุณมากที่สุด: เลือกส่วนประกอบแต่ละอย่างอย่างรอบคอบและสร้างโซลูชันที่เหมาะกับความต้องการของคุณมากที่สุด ไม่มีวิธีใดถูกหรือผิดที่จะทำ และคุณสามารถสลับส่วนประกอบต่างๆ ได้เมื่อข้อมูลของคุณต้องเติบโตเต็มที่และเปลี่ยนไป
ฟังดูดีใช่ไหม และภายใต้สถานการณ์ที่เหมาะสม! แต่สิ่งสำคัญคือต้องเข้าใจข้อจำกัดก่อนที่จะตัดสินใจเริ่มต้นเส้นทางของดาต้าเมช เพื่อให้คุณมั่นใจได้ว่าผลิตภัณฑ์ขั้นสุดท้ายจะบรรลุผลลัพธ์ที่ต้องการสำหรับธุรกิจของคุณ
ดาต้าเมชไม่ใช่เครื่องมือวิเศษ
จะไม่แก้ปัญหาธรรมาภิบาลที่มีอยู่
หากองค์กรของคุณประสบปัญหากับการกำกับดูแลและการจัดทำเอกสารเกี่ยวกับทรัพยากรข้อมูลแล้ว Data Mesh จะไม่สามารถแก้ปัญหานี้ได้อย่างแท้จริง
โซลูชันแบบกระจายอำนาจมักจะส่งผลให้ผลิตภัณฑ์มีคุณภาพและความน่าเชื่อถือที่แตกต่างกันไป ภายในเครือข่ายข้อมูล ทีมธุรกิจเป็นเจ้าของผลิตภัณฑ์ข้อมูลของตนเอง ซึ่งหมายความว่าพวกเขามีหน้าที่รับผิดชอบในแนวทางปฏิบัติด้านคุณภาพและธรรมาภิบาลของตนเอง ทีมที่เป็นเจ้าของผลิตภัณฑ์ข้อมูลเหล่านี้อาจไม่ได้รับแรงจูงใจในอุดมคติที่จะทำให้ข้อมูลของพวกเขาใช้งานได้ง่ายขึ้นสำหรับกรณีการใช้งานต่างๆ นอกทีมของพวกเขา (Swapnil Waniมีบทความดีๆ ที่กล่าวถึงปัญหานี้อย่างละเอียด)
ในขณะที่ความเป็นเจ้าของแบบกระจายสามารถขยายการเข้าถึงและเข้าถึงข้อมูลได้ การกระจายอำนาจยังสามารถนำไปสู่ไซโลข้อมูล แหล่งที่มาของความจริงที่ขัดแย้งกัน และความพยายามที่ซ้ำซ้อน ซึ่งทำให้จุดบกพร่องที่มีอยู่แย่ลงซึ่งมาจากโซลูชันดาต้าเลค
ทีมธุรกิจต้องพร้อมที่จะเป็นเจ้าของผลิตภัณฑ์ข้อมูลของตน
ไม่สามารถผลักวิธีการตาข่ายข้อมูลออกจากองค์กรไอทีได้ หากองค์กรของคุณยังไม่มีวัฒนธรรมข้อมูลที่แข็งแกร่งซึ่งทีมธุรกิจมีความพร้อมและกระตือรือร้นที่จะเป็นเจ้าของผลิตภัณฑ์ข้อมูลของตนเพื่อปรับปรุงความคล่องตัวและลดความขัดแย้ง อาจเป็นเรื่องยากที่จะได้ทีมที่ไม่เชี่ยวชาญด้านเทคนิคมาเป็นเจ้าของผลิตภัณฑ์ที่พวกเขา ในอดีตไม่มีความรับผิดชอบเลยแม้แต่น้อย
การพัฒนาแบบกระจายอำนาจมักจะมีราคาแพงกว่า
รูปแบบการดำเนินงานแบบดั้งเดิมของวิศวกรรมข้อมูลแบบรวมศูนย์ต้องการทรัพยากรด้านเทคนิคที่มีทักษะน้อยลง เนื่องจากทีมธุรกิจต่างใช้ทรัพยากรเหล่านั้นร่วมกัน การกระจายอำนาจสามารถนำไปสู่การว่าจ้างทีมธุรกิจแต่ละทีมและสนับสนุนทีมเทคนิคของตนเอง ซึ่งต้องใช้ทรัพยากรมากขึ้น ในแง่หนึ่ง นี่เป็นเหตุผลหนึ่งที่ความคล่องตัวและความเร็วในการจัดส่งได้รับการปรับปรุง: มีผู้คนจำนวนมากขึ้นในการส่งมอบ บางทีอาจมีความต้องการที่แข่งขันกันน้อยลงในด้านเวลาของพวกเขา ในทางกลับกัน ทีมธุรกิจอาจไม่สามารถทำหน้าที่บางอย่างได้อย่างเต็มที่ เช่น การทดสอบ ซึ่งอาจกัดกร่อนคุณภาพของโซลูชันหรือทำให้เกิดพฤติกรรมที่ผิดปกติได้ ท้ายที่สุดแล้ว มันคือการแลกเปลี่ยนระหว่างการมีคนน้อยลงทำงานเป็นระยะเวลานานขึ้น ทำให้ใช้เวลาในการวางตลาดนานขึ้น หรือมีทีมที่ใหญ่ขึ้นและมีเวลาออกสู่ตลาดเร็วขึ้น ซึ่งนำไปสู่การเติบโตที่มากขึ้นในเวลาอันสั้น
มีโซลูชันที่พยายามลดความต้องการด้านเทคนิคของผู้ใช้ทางธุรกิจโดยการจัดหาแพลตฟอร์มแบบเขียนโค้ดต่ำ แต่แพลตฟอร์มทั่วไปที่เรียบง่ายและใช้งานง่ายมักไม่ค่อยตอบสนองความต้องการทางธุรกิจทั้งหมดของคุณ Edge case มีอยู่และจะต้องมีทีมเทคนิคในการสร้างและสนับสนุน
การแลกเปลี่ยนความยืดหยุ่นกับความเรียบง่าย
การมีองค์กรไอทีส่วนกลางที่ออกแบบโซลูชันทางสถาปัตยกรรมที่ทีมธุรกิจจะเป็นเจ้าของมักจะส่งผลให้เกิดความไม่ตรงกันระหว่างข้อกำหนดทางเทคนิคของโซลูชันกับความสามารถทางเทคนิคหรือความต้องการของทีม หากเป้าหมายคือโซลูชันแบบกระจายศูนย์อย่างแท้จริง ทีมธุรกิจจะดำเนินไปในทิศทางของตนเองและก้าวข้ามข้อจำกัดที่ออกแบบโดยสถาปนิกข้อมูลแบบรวมศูนย์
โซลูชันที่มีประสิทธิผลจะตกอยู่ที่จุดใดจุดหนึ่งบนความต่อเนื่อง โดยมีความคล่องตัวที่สมบูรณ์แบบที่ปลายด้านหนึ่ง และความสม่ำเสมอและความเรียบง่ายที่สมบูรณ์แบบในอีกด้านหนึ่ง แต่ละองค์กรต้องมาถึงจุดที่ตรงกับความต้องการ และจุดสมดุลนั้นจะมีวิวัฒนาการไปตามกาลเวลา ซึ่งเกี่ยวข้องกับการประนีประนอมเสมอ
ด้วยเครือข่ายข้อมูล ความยืดหยุ่นมักจะมาพร้อมกับความเรียบง่าย แนวทางบางอย่างในระหว่างนั้นเป็นไปได้อย่างแน่นอน แต่ต้องมาถึงแบบวนซ้ำผ่านการลองผิดลองถูก เพื่อให้เป็นไปตามความสามารถขององค์กรโดยรวมและแต่ละหน่วยธุรกิจแยกกัน
ความสำเร็จขึ้นอยู่กับผู้สมัคร
ผู้สมัครที่แข็งแกร่งที่สุดสำหรับเครือข่ายข้อมูลประกอบด้วยกรณีธุรกิจที่น่าสนใจ การซื้อที่แข็งแกร่งและทรัพยากรที่เพียงพอ และวัฒนธรรมองค์กรที่สนับสนุน
หากคุณมีแนวทางที่ได้ผลสำหรับคุณ เช่น องค์กรของคุณไม่ได้มุ่งเน้นที่โดเมนและมีการรวมศูนย์ไอทีด้วยทรัพยากรที่สามารถปรับเปลี่ยนได้ซึ่งนำไปใช้ควบคู่ไปกับโครงการต่างๆ ดังนั้น Data Mesh จึงอาจไม่ใช่การลงทุนที่เหมาะสมในเวลานี้
ถ้าตาข่ายข้อมูลซับซ้อนขนาดนั้น ทำไมฉันถึงต้องการมัน
ความต้องการเครือข่ายข้อมูลเชื่อมโยงกับเป้าหมายพื้นฐานในการเป็นองค์กรที่ขับเคลื่อนด้วยข้อมูล ขึ้นอยู่กับสถานะปัจจุบันของคุณ ต่อไปนี้คือเคล็ดลับบางประการสำหรับการดำเนินการขั้นต่อไปหรือขั้นแรก สู่การตระหนักถึงวัฒนธรรมข้อมูลสมัยใหม่
รากฐาน
หากคุณเพิ่งเริ่มต้น ให้มุ่งเน้นไปที่สามด้าน: การกำกับดูแล วิศวกรรมสมัยใหม่ และคุณภาพของข้อมูล
- การกำกับดูแล
ตามที่เราระบุไว้ก่อนหน้านี้ หากองค์กรของคุณมีปัญหาด้านการกำกับดูแลอยู่แล้ว ตาข่ายข้อมูลจะไม่แก้ไขปัญหานี้ ก่อนเริ่มดำเนินการบนเครือข่ายข้อมูล ตรวจสอบให้แน่ใจว่าคุณมีเฟรมเวิร์กการกำกับดูแลข้อมูลอยู่แล้ว แม้ว่าจะเป็นส่วนหนึ่งขององค์กรขนาดใหญ่ก็ตาม ทำงานร่วมกับทีมธุรกิจเพื่อปรับปรุงแนวทางปฏิบัติที่ดีที่สุดในการรู้ข้อมูลก่อนที่จะกระจายอำนาจ ระบุโดเมนธุรกิจ แสดงรายการองค์ประกอบข้อมูลที่เป็นส่วนหนึ่งของโดเมน และสร้างเมทริกซ์ RACI ความเป็นเจ้าของโดเมนที่ชัดเจนและใครเป็นผู้รับผิดชอบสิ่งที่สำคัญสำหรับองค์ประกอบแบบบริการตนเองของดาต้าเมช หารือกับฝ่ายที่เกี่ยวข้องและตรวจสอบให้แน่ใจว่าพวกเขาเห็นด้วยกับความคิดริเริ่ม มากกว่าเทคโนโลยี คือคนที่ขับเคลื่อนกระบวนการ - ตาข่ายข้อมูล วิศวกรรมสมัยใหม่
ก่อตั้งขึ้นจากแนวทางปฏิบัติทางวิศวกรรมสมัยใหม่ของระบบอัตโนมัติ การส่งมอบอย่างต่อเนื่อง และ DevOps ซึ่งเป็นลักษณะที่ไม่สามารถต่อรองได้ทั้งหมดของเทคโนโลยีซึ่งจำเป็นสำหรับการสนับสนุนการแบ่งปันข้อมูลเชิงโดเมน การตรวจสอบว่าแนวทางปฏิบัติด้านวิศวกรรมเหล่านั้นมีอยู่ในองค์กรของคุณหรือไม่ หรือคุณมีความสามารถในการสนับสนุนความพยายามดังกล่าวหรือไม่นั้นเป็นสิ่งสำคัญ - คุณภาพของข้อมูล
แม้จะมีบุคลากร กระบวนการ และเทคโนโลยีที่ดีที่สุด โครงการดาต้าเมชมักจะล้มเหลวเนื่องจากไม่สามารถแสดงมูลค่าทางธุรกิจได้เนื่องจากขาดคุณภาพของข้อมูล ตรวจสอบคุณภาพของข้อมูลที่เข้ามาและแก้ไขให้ใกล้เคียงกับต้นทาง ยิ่งคุณภาพดีเท่าใดมูลค่าที่ได้รับก็จะยิ่งสูงขึ้นเท่านั้น
เมื่อคุณสร้างเฟรมเวิร์กการกำกับดูแลที่มั่นคง แนวปฏิบัติด้านวิศวกรรมสมัยใหม่ และวัฒนธรรมข้อมูลที่แข็งแกร่งแล้ว ต่อไปนี้เป็นเคล็ดลับ 3 ข้อในการตั้งค่าการใช้ดาต้าเมชเพื่อความสำเร็จ
- เริ่มต้นเล็ก ๆ แต่เลือกผู้สมัครที่เหมาะสม
สิ่งสำคัญคือต้องเริ่มต้นเล็ก ๆ และเลือกผู้สมัครที่เหมาะสมเพื่อทำการพิสูจน์แนวคิด ซึ่งเป็นสิ่งที่แสดงให้เห็นถึงคุณค่าของตาข่ายข้อมูลต่อชุมชนธุรกิจและผู้สนับสนุนเพื่อให้พวกเขามีส่วนร่วม ท้ายที่สุดแล้ว องค์ประกอบสำคัญคือการสร้างวัฒนธรรมข้อมูลในองค์กร ค้นหาโครงการที่จะนำมาซึ่งมูลค่าทางธุรกิจเชิงปริมาณพร้อมเป้าหมายที่ชัดเจน กำหนดเป้าหมายและวัตถุประสงค์ให้ชัดเจนตั้งแต่เนิ่นๆ และหารือกับผู้นำด้านข้อมูลภายในองค์กรเพื่อหลีกเลี่ยงโครงการและความคิดริเริ่มที่ขัดแย้งกัน ด้วยวิธีนี้ คุณสามารถลดการตอบกลับและรวบรวมการสนับสนุนสูงสุด - ทำงานกับสิ่งที่คุณมี
โครงการเครือข่ายข้อมูลส่วนใหญ่เป็นโครงการสีน้ำตาล หมายความว่าคุณกำลังปรับปรุงสิ่งที่มีอยู่แล้วและใช้งานได้โดยทั่วไป แม้ว่าจะไม่สมบูรณ์แบบก็ตาม การเสนอการปรับใช้ใหม่ไม่เพียงแต่มีราคาแพงเท่านั้น แต่ยังมีแนวโน้มที่จะได้รับการตอบกลับจากทีมที่เคยใช้โซลูชันก่อนหน้านี้ด้วย (โดยธรรมชาติของมนุษย์!) คุณอาจต้องใช้ชุดเทคโนโลยีใหม่ แต่ควรคำนึงถึงองค์ประกอบในการยกระดับทักษะด้วย — ง่ายกว่าที่จะนำเทคโนโลยีที่มีอยู่กลับมาใช้ใหม่และใช้ประโยชน์จากความรู้ที่พนักงานของคุณมีอยู่แล้ว - รวมทีมของคุณในการเดินทาง
ดังคำกล่าวที่ว่า สำหรับองค์กรขนาดใหญ่หลายแห่ง มือซ้ายไม่รู้ว่ามือขวากำลังทำอะไร ความคิดริเริ่มแบบคู่ขนานหลาย ๆ ครั้งมักทำให้เกิดความรู้สึกที่ชัดเจนเกี่ยวกับเป้าหมายร่วมกัน การทำโรดโชว์และให้ผู้ใช้ทางธุรกิจพูดด้วยตัวเองจะไม่เพียงสร้างแรงผลักดัน แต่ยังช่วยให้คุณระบุกรณีการใช้งานที่คุณคิดว่าไม่มีอยู่จริง
โดยพื้นฐานแล้ว data mesh เป็นวิธีการทางสังคมเทคนิคที่ต้องอาศัยการทำงานร่วมกันระหว่างผู้คน กระบวนการ และเทคโนโลยีเพื่อทำให้ข้อมูลเป็นประชาธิปไตยในระดับมาก การจัดองค์ประกอบทั้งสามนี้เป็นกระบวนการที่เกิดซ้ำ ซึ่งมักต้องใช้เวลาและทรัพยากรจำนวนมาก
ที่ Slalom เราเป็นพันธมิตรกับคุณเพื่อทำความเข้าใจธุรกิจและกรณีของมนุษย์สำหรับแนวทางต่างๆ และช่วยคุณจัดลำดับความสำคัญของการลงทุนที่จะปลดล็อกคุณค่าและช่วยให้คุณบรรลุวัตถุประสงค์
Slalom เป็นบริษัทที่ปรึกษาระดับโลกที่ช่วยให้ผู้คนและองค์กรมีความฝันที่ใหญ่ขึ้น ก้าวเร็วขึ้น และสร้างอนาคตที่ดีกว่าสำหรับทุกคน เรียนรู้เพิ่มเติมและติดต่อวันนี้