Tag Archives: hdfs

John Matherly ผู้ก่อตั้ง Shodan ได้ออกมาเปิดเผยถึงการค้นพบว่ามี Server ที่ใช้งาน Apache Hadoop ทั่วโลกนั้น มีข้อมูลรั่วรวมกันทั้งสิ้นเกินกว่า 5 Petabyte หรือเกินกว่า 5,000 Terabyte เลยทีเดียว

ที่ผ่านมาเรามักได้ยินเรื่องราวการนำ Open Source Software มาใช้งานจากธุรกิจในฝั่งอเมริกาและยุโรปกันเป็นส่วนมาก แต่ในปัจจุบันนี้จีนเองก็เริ่มกลายเป็นตลาดใหญ่ของวงการ Open Source ที่ผันตัวออกมาจากการเป็นเพียงผู้ใช้ ก้าวสู่การเป็นผู้ Contribute เป็นที่เรียบร้อยแล้ว ตัวอย่างหนึ่งที่เห็นได้ค่อนข้างชัดคือ Huawei ที่ทำธุรกิจ IT อยู่ในทั้งวงการโทรคมนาคมและ Enterprise ก็เป็นอีกหนึ่งบริษัทที่ได้ลงทุนกับ Open Source และนำ Open Source ออกมาสร้างเป็นผลิตภัณฑ์ออกสู่ตลาดจริง โดยเฉพาะ Big Data Analytics ที่กลายเป็นหัวใจของธุรกิจโทรคมนาคมและการเงินในทุกวันนี้ไปแล้ว

All Flash Storage ได้กินส่วนแบ่งตลาดจัดเก็บข้อมูลใน Data Center ไปแล้ว 20% ทั่วโลก และ EMC ก็ประกาศเปิดตัว Dell EMC Isilon All-Flash ภายในงาน Dell EMC World 2016 ( #DellEMCWorld ) เป็นที่เรียบร้อย

เป็นอีกข่าวที่เสริมความร้อนแรงให้กับเทคโนโลยี Container และ Big Data Analytics ในช่วงนี้ เมื่อ Mesosphere ประกาศเปิดตัว DC/OS ระบบ Open Source Platform สำหรับ Deploy Application ต่างๆ ได้อย่างหลากหลายและง่ายดาย ซึ่งรวมถึง Docker Container และระบบ Big Data Analytics จากระบบกลางของ DC/OS เพียงระบบเดียว

IBM และ SanDisk ประกาศความร่วมมือ เตรียมนำ IBM Spectrum Scale มาทำงานบนแพลตฟอร์ม InfiniFlash ซึ่งเป็น All-flash Array ของ SanDisk

Big Data Analytics เป็นคำที่ทุกคนในวงการได้ยินกันมานาน หลายๆ คนก็คงอยากสัมผัสกับเทคโนโลยีเหล่านี้แต่ไม่รู้จะเริ่มต้นยังไง วันนี้ทาง TechTalkThai เลยขอออกมาแชร์ประสบการณ์ในการลองเล่น Apache Hadoop แบบง่ายๆ ใช้เวลาไม่ถึง 2 ชั่วโมง แต่ได้เห็นภาพรวมคร่าวๆ ของเทคโนโลยี Big Data Analytics ต่างๆ มาให้ทุกคนได้ลองเล่นตามกันด้วย Cloudera CDH 5.8 QuickStart VM ที่สามารถลองเล่นได้ทุกคนไม่ว่าจะเป็น IT Manager, Programmer, Network Engineer, System Engineer หรือ Security Expert ดังนี้ครับ

สำหรับองค์กรที่ต้องการพัฒนา Application ขนาดใหญ่ ที่มีการประมวลผล Unstructured Data ปริมาณมหาศาล และต้องการมองหาทางออกที่จะช่วยให้การนำข้อมูลเหล่านั้นไปใช้ต่อยอดได้อย่างยืดหยุ่นเพื่อความคุ้มค่าสูงสุด DCS ขอแนะนำ IBM Spectrum Scale โซลูชั่น Software Defined Storage ที่ถูกออกแบบมาเพื่อตอบโจทย์นี้โดยเฉพาะนั่นเอง

ระบบวิเคราะห์ Log สำหรับการบริหารจัดการ IT Infrastructure จาก VMware อย่าง vRealize Log Insight นั้น ได้ออกรุ่น 3.0 มาให้ใช้งานกันได้แล้ว โดยมีความสามารถใหม่ๆ ที่น่าสนใจดังนี้

Isilon ที่มาพร้อมประสิทธิภาพเหนือกว่าเดิมถึง 2 เท่า ด้วยราคาเพียงครึ่ง Isilon และ Pivotal จับมือส่งระบบวิเคราะห์ข้อมูล Hadoop สำหรับ Data Lake สู่ตลาด สรุปประเด็นข่าว การเสริมความแข็งแกร่งแกร่ง Isilon Storage ของ EMC ครั้งนี้ส่งให้ Isilon ของ EMC เป็น Storage คุณภาพระดับองค์กรรายแรกที่เป็น Scale-out Data Lake และด้วยความสามารถของ HDFS สามารถทำการวิเคราะห์ Big Data ได้โดยไม่ต้องทำสำเนาข้อมูลจำนวนมหาศาลไปที่ Hadoop รองรับขนาดข้อมูลจำนวนมหาศาล พร้อมประสิทธิภาพในการขยายขนาดความจุข้อมูลได้อย่างยืดหยุ่นมากกว่าโซลูชันใดๆในการรวมข้อมูลเพื่อการวิเคราะห์  โดยใช้เทคโนโลยีการรวม Data Lake หรือข้อมูลจากแหล่งที่หลากหลายและทุกรูปแบบเข้าไว้ในแบบ Single File System และ Single Volume อันทำให้สามารถบริหารจัดการและวิคราะห์ข้อมูลได้รวดเร็วและง่ายขึ้น Isilon S210 และ Isilon X410 ให้ความสามารถในการรับส่งข้อมูลได้เร็วมากขึ้นกว่ารุ่นเดิมถึง 2 เท่า ใหม่และโดดเด่นด้วย  SmartFlash …

EMC ยักษ์ใหญ่ด้านการผลิตระบบจัดเก็บข้อมูลและบริหารจัดการข้อมูล เปิดตัว EMC Elastic Cloud ระบบ Cloud Storage ครบวงจรสำหรับ Hyper-scale ISP และ Hyper-scale Enterprise ที่ต้องการลงทุนสร้าง Elastic Cloud Storage ขนาดใหญ่ระดับ Exabyte สำหรับให้บริการหรือใช้งานเองโดยเฉพาะ โดยจากตัวอย่างการออกแบบ สามารถจัดเก็บข้อมูลได้ใหญ่เกินกว่า 5.7 Petabytes (ขนาดเท่ากับ 5,700 TB หรือ 5,700,000GB) และมีค่าใช้จ่ายต่ำกว่าผู้ให้บริการระบบ Cloud Storage รายใหญ่อย่าง Google และ Amazon มากกว่าถึง 23% เลยทีเดียว