การจัดการข้อมูลขนาดใหญ่(BIG DATA)

 ประวัติและความเป็นมาการจัดการข้อมูลขนาดใหญ่



คำว่า "ข้อมูลขนาดใหญ่" หมายถึงข้อมูลที่มีขนาดใหญ่ เร็ว หรือซับซ้อนจนยากหรือเป็นไปไม่ได้ที่จะประมวลผลโดยใช้วิธีการแบบเดิม การเข้าถึงและจัดเก็บข้อมูลจำนวนมากเพื่อทำการวิเคราะห์มีมานานแล้ว แต่แนวคิดเกี่ยวกับข้อมูลขนาดใหญ่เป็นที่แพร่หลายในช่วงต้นปีค.ศ. 2000 เมื่อ  ดั๊ก ลานีย์ นักวิเคราะห์อุตสาหกรรมได้ให้คำจำกัดความที่เป็นที่เข้าใจกันในขณะนี้ว่า

ความหมายของ Big Data


บิ๊กดาต้า (Big Data) คือ คำนิยามของข้อมูลที่มีขนาดใหญ่ทุกชนิดที่อยู่ในองค์กร ได้แก่ ข้อมูลบริษัท ข้อมูลลูกค้า Suppliers พฤติกรรมผู้บริโภค Transactio ไฟล์เอกสารต่างๆ ที่เกี่ยวข้องทั้งหมด รวมไปจนถึง รูปภาพ URLs ลิงค์ต่างๆ ฯลฯ ที่มีปริมาณมากจนกระทั่งซอฟต์แวร์ปกติทั่วไปไม่สามารถรองรับการเก็บข้อมูลหรือประมวลผลได้อย่างเต็มประสิทธิภาพ 

Big Data คือ เทคโนโลยีและสถาปัตยกรรมไอทีรุ่นใหม่ ซึ่งอาจมาในรูปแบบซอฟต์แวร์ ที่สามารถรองรับการจัดเก็บ การจัดการ กรองเลือกข้อมูล การวิเคราะห์ แสดงผล และการใช้งานข้อมูล 

คุณลักษณะของ BIG DATA

มี6 ลักษณะ

1. Volumeปริมาณ

2. Varitetyความหลายกหลาย

3. Velocityความเร็ว

       4. Veracityความถูกต้อง

         5. Valueคุณค่า

          6. Variabilityความแปรผันได้


คุณลักษณะ มีดังนี้ : มีปริมาณมาก Volume อย่างที่ได้กล่าวไปแล้วในข้างต้นว่า Big Data เป็นข้อมูลที่มีขนาดใหญ่หรือเป็นข้อมูลที่มีปริมาณมากมายมหาศาลไม่ว่าจะอยู่ในรูปแบบออนไลน์หรือออฟไลน์โดยข้อมูลเหล่านี้จะมีปริมาณมากกว่าหน่วย TB ขึ้นไป : มีการเปลี่ยนแปลงอย่างรวดเร็ว Velocity เนื่องจากข้อมูล Big Data มีการเปลี่ยนแปลงอย่างรวดเร็วและต่อเนื่องชนิดที่เรียกว่า Real Time จึงทำให้สามารถวิเคราะห์ง่ายๆแบบ Manual ได้แต่ไม่สามารถจับทิศทางเลยรูปแบบที่ชัดเจนหรือใส่ตัวของข้อมูลเหล่านั้นได้ : หลากหลายประเภทหรือแหล่งที่มา Variety ข้อมูลมีรูปแบบที่แตกต่างกันออกไปยกตัวอย่างเช่นข้อมูลที่เป็นไฟล์ภาพรูปภาพตัวอักษรหรือวีดีโอในขณะเดียวกันก็มีที่มาที่หลากหลายไม่ว่าจะเป็น platform e-commerce Social Network เป็นต้น : ยังไม่ผ่านการประมวลผล Veracity หาก Big Data นั้น ไม่ผ่าน process หรือแปลงให้อยู่ในรูปแบบของข้อมูลดิบ(Raw Data) ก็จะไม่สามารถใช้งานหรือใช้ประโยชน์ต่อองค์กรหรือบริษัทได้ กระบวนการในการทำงาน ประกอบไปด้วย 3 ขั้นตอนต่อไปนี้ 1.การรวบรวมข้อมูล การรวบรวมข้อมูล Big Data ทหน้าที่ในการรวบรวมข้อมูลที่หลากหลายและข้อมูลที่แตกต่างกันออกไปซึ่งเทคโนโลยีแบบดั้งเดิมนั้นไม่สามารถทำได้โดย Big Data สามารถเก็บข้อมูลที่มีขนาดใหญ่และรวบรวมข้อมูลได้มากมายมหาศาลในรูปแบบของเทราไบต์หรือบางครั้งอาจเก็บข้อมูลในระดับเพธาไบต์ในก็ว่าได้ 2.การจัดการข้อมูล ข้อมูลที่มากมายมหาศาลหรือบิ๊กดาต้าจะต้องทำการจัดเก็บข้อมูลขนาดใหญ่หรือหาแหล่งที่อยู่ให้มันยกตัวอย่างเช่นon premises หรือ cloud ที่นิยมใช้ในปัจจุบันทั้งนี้ขึ้นอยู่กับความต้องการหรือความสะดวกในการใช้งานแต่ในบางกรณีอาจจะต้องจัดเก็บข้อมูลไว้ใกล้กับแหล่งข้อมูลที่มีความยืดหยุ่นสูง 3.การวิเคราะห์ Big Data อาจจะต้องใช้เงินลงทุนที่สูงในการสร้างข้อมูลขนาดใหญ่แต่ทางนี้จะไม่ก่อให้เกิดประโยชน์ต่ออะไรเลยหากคุณไม่นำข้อมูลเหล่านั้นมาใช้วิเคราะห์เพื่อทำให้เกิดความกระจ่างและชัดเจนของชุดข้อมูลที่มีอยู่โดยส่วนใหญ่จะใช้ AI ในการวิเคราะห์ด้วยการสร้างรูปแบบจำลองของข้อมูลเพื่อนำข้อมูล มาหา ข้อสรุปพัฒนาต่อยอดให้เกิดประโยชน์สูงสุด
          


เครื่องมือที่ใช้ในการวิเคราะห์ Big Data



















เครื่องมือที่ใช้ในการจัดการฐานข้อมูล

(Database/Data Warehouses)

















 

https://www.dct.or.th/






https://www.dga.or.th/




Open Government 

Data of Thailand



สำนักงานพัฒนารัฐบาลดิจิทัล (องค์การมหาชน) (สพร.)


Digital Government Development Agency

หรือดูข้อมูลได้ที่ 👉https://data.go.th/organization/cea👈













ความคิดเห็น

โพสต์ยอดนิยมจากบล็อกนี้

การเรียนรู้ดิจิทัล (Digital Literacy)และการใช้อินเทอร์เน็ตเสริมสร้างการเรียนรู้