on
ถ้ายังจำกันได้ ปัญหาของเกม Pokemon Go ในช่วงแรกๆ คือเซิร์ฟเวอร์ไม่พอกับความต้องการ แต่ท้ายที่สุดแล้วทาง Niantic ก็ไม่เคยเผยข้อมูลว่าเซิร์ฟเวอร์ของ Pokemon Go ใช้ระบบของอะไร
วันนี้ข้อมูลเผยออกมาแล้ว ว่าเป็น Google Cloud Platform ตามที่หลายคนคาดกัน สิ่งที่น่าสนใจคือทราฟฟิกของ Pokemon Go สูงกว่าที่ทีมงานคาดการณ์ไว้ถึง 50 เท่าเลยทีเดียว
เรื่องนี้เปิดเผยโดยทีมงาน Google Cloud Platform ที่ประเมินกันว่าทราฟฟิกระดับ worst case น่าจะมากกว่าทราฟฟิกที่ประเมินไว้ราว 5 เท่า แต่เอาเข้าจริง ทราฟฟิกกลับทะลุความคาดหมายอย่างรวดเร็วภายในเวลาเพียง 15 นาทีหลังเปิดให้ดาวน์โหลดในออสเตรเลียและนิวซีแลนด์ และจบที่ทราฟฟิกจริงสูงกว่าที่คาดไว้ 50 เท่า
<img src="https://i.imgur.com/YMhZoCl.png"/ >
หน้าที่ในการดูแลโหลดระดับนี้เป็นของทีม Google Customer Reliability Engineering (CRE) ทีมใหม่ที่กูเกิลตั้งขึ้นมาเพื่อดูแลลูกค้ารายใหญ่โดยเฉพาะ และลูกค้ารายแรกก็คือ Niantic กับ Pokemon Go นั่นเอง
หลังจากเปิดให้ดาวน์โหลดและทราฟฟิกโตเกินเป้า ทีมงาน Niantic ก็โทรหาทีม Google CRE เพื่อขอความช่วยเหลือทันที เพราะตามแผนต้องเปิดเซิร์ฟเวอร์ให้ผู้เล่นในสหรัฐอเมริกาในวันต่อไป
ทางทีม CRE ก็ตอบรับโดยการเพิ่มขีดความสามารถของคลาวด์แบบเต็มที่ให้ Niantic เพื่อรองรับความต้องการ แต่อุปสรรคก็ยังไม่หมด เพราะตัวเกมมีปัญหาเสถียรภาพ ทั้งสองทีมจึงต้องทำงานร่วมกันเพื่อแก้ปัญหาไปทีละเปลาะ โดยทีม CRE เข้าไปช่วยรีวิวสถาปัตยกรรมของ Pokemon Go ตลอดเวลา
ระบบเบื้องหลัง Pokemon Go ได้แก่
- Google Cloud Datastore ฐานข้อมูลแบบ NoSQL ไว้เก็บข้อมูลของผู้เล่น
- ตัวลอจิกของเกม รันอยู่บน Google Container Engine (GKE) ที่ใช้ซอฟต์แวร์จากโครงการ Kubernetes บริการคลัสเตอร์ จุดที่น่าสนใจคือทีมงานต้องเปลี่ยนเวอร์ชันของ GKE กลางคันเพื่อให้รับโหลดได้มากขึ้น ซึ่งต้องระวังไม่ให้ผู้เล่นได้รับผลกระทบ
- HTTP/S Load Balancer สำหรับกระจายโหลดไปยังเซิร์ฟเวอร์ต่างๆ ตัวนี้เป็นซอฟต์แวร์ใหม่ที่เขียนขึ้นมาแทน Network Load Balancer เดิมของกูเกิล
หลังจากเปิดบริการในสหรัฐแล้ว ทางทีม Niantic และ CRE ก็มีประสบการณ์มากพอ และการปรับระบบเซิร์ฟเวอร์ในช่วงแรก ทั้งการขยายขีดความสามารถคลาวด์ และการปรับมาใช้ GKE กับ HTTP/S Load Balancer เวอร์ชันใหม่ ช่วยให้ระบบสามารถรองรับการเปิดบริการในญี่ปุ่นได้อย่างราบรื่นไม่มีสะดุด
ทีมงาน Google Cloud บอกว่า Pokemon Go คือระบบที่ใช้ Kubernetes บน Google Container Engine ที่ใหญ่ที่สุดตั้งแต่เคยมีมา (ไม่บอกจำนวนที่แน่ชัด แต่บอกว่าเป็นหลัก "หลายหมื่นคอร์") ทีมงานแก้ไขโค้ดจำนวนมากเพื่อรองรับสเกลระดับนี้ และส่งโค้ดกลับไปยังโครงการโอเพนซอร์สแล้ว
ที่มา - Google Cloud Platform Blog
Cloud
darthvader Fri, 30/09/2016 - 22:12
Cloud ค่ายอื่นอ่านแล้วคงอิจฉาได้ลองของจริง
ญีปุ่นวันแรกที่เละสุดๆ
animateex Fri, 30/09/2016 - 22:37
ญีปุ่นวันแรกนี่เละสุดๆ พอขึ้นวันที่สองนี้ลื่นจนน่าตกใจ ถึงจะยังมีหลุดให้เห็นอยู่บ้างแต่ก็น้อยลงเยอะ
จริงครับ
orbitalz Mon, 03/10/2016 - 17:21
In reply to ญีปุ่นวันแรกที่เละสุดๆ by animateex
จริงครับ ญี่ปุ่นวันแรกนี่ล่มต่อเนื่องมาก
ตอนนี้ล่ะ?
Patchan Fri, 30/09/2016 - 22:44
ตอนนี้ล่ะ?
ลืมใส่ที่มาหรือเปล่าครับ
pruet Fri, 30/09/2016 - 23:02
ลืมใส่ที่มาหรือเปล่าครับ
เพิ่มละครับ
mk Sat, 01/10/2016 - 08:46
In reply to ลืมใส่ที่มาหรือเปล่าครับ by pruet
เพิ่มละครับ
ตอนนี้คงไม่ต้องรับภาระหนักขนา
readonly Sat, 01/10/2016 - 06:16
ตอนนี้คงไม่ต้องรับภาระหนักขนาดนั้นแล้วสินะ. //เลิกเล่นกันไปเยอะมาก
ความสำคัญของการลงทุน
kengeng Sat, 01/10/2016 - 10:03
ความสำคัญของการลงทุน Infrastructure เห็นประโยชน์ก็ตอนนี้ 5เท่า-> 50เท่า ถ้าไม่ใช่อเมริกาคงทำได้ยาก สมมติไทยสร้างเกมส์ที่ฮิตมาก คนมาเล่นจากทั่วโลก ตกม้าตายเพราะ Infrastructure ไม่รองรับ
คล้ายกับกรณี Facebook ตอนเริ่มต้น ถ้าบริษัทมาเกิดแถวนี้คงไม่ไปถึงไหน เพราะช้ามาก
บางครั้งการลงทุนบางอย่างดูไม่คุ้มค่าเลย แต่มันเกิดผลลัพท์ทางอ้อม
เกี่ยวยังไง
blackdemon Sat, 01/10/2016 - 12:55
In reply to ความสำคัญของการลงทุน by kengeng
เกี่ยวยังไง คนไทยสร้างเกมก็ใช้ AWS, Cloud Engine ได้หนิ
ถ้าตามข่าวนี้ก็มี
-Rookies- Sun, 02/10/2016 - 07:35
In reply to เกี่ยวยังไง by blackdemon
ถ้าตามข่าวนี้ก็มี "ทีมพิเศษที่ช่วยดูแลลูกค้าพิเศษ" ช่วยรีวิวโค้ดให้เลยนะครับ ถ้าตัวอย่างที่ยกมาประสบความสำเร็จใกล้เคียงระดับนี้นะครับ
ถ้าพูดขนาดนี้
blackdemon Sun, 02/10/2016 - 13:21
In reply to ถ้าตามข่าวนี้ก็มี by -Rookies-
ถ้าพูดขนาดนี้ ผมยกมั่งว่าในไทยคงไม่มีใครทำเกมที่มีมูลค่าการลงทุนเท่ากับ Pokemon Inc. หรอก (ได้ข่าวว่าหลักร้อยล้านนะครับ) และถ้ามีเงินขนาดนั้นผมก็เชื่อว่าเค้าคงมี "ทีมพิเศษ" ให้เหมือนกันล่ะครับ
ตามสบายเลยครับ
-Rookies- Sun, 02/10/2016 - 23:34
In reply to ถ้าพูดขนาดนี้ by blackdemon
ตามสบายเลยครับ ผมไม่ได้เป็นคนเริ่ม ผมแค่อธิบายให้ฟังเฉย ๆ ว่าเขาน่าจะคิดแบบนั้น
ขอบคุณสำหรับบทความครับ
ปลงนะเรา Sat, 01/10/2016 - 10:51
ขอบคุณสำหรับบทความครับ อยากรู้นานแล้วว่าเค้าใช้ตัวไหนดก็บ DB ผู้เล่นหว่า แค่ผู้เล่นรายเดียวนี้ เฉพาพผมนาทีหนึ่งผมกดนู้นนี่นั่นเยอะมากกกกกกก
วันเปิดตัวสำหรับทีมงานคง
adente Sat, 01/10/2016 - 21:06
วันเปิดตัวสำหรับทีมงานคง coffee X50 เช่นกัน