By mk Founder on Tag: BigQuery, Google Cloud, Gemini, Google, Big Data
BigQuery

กูเกิลเดินหน้าเพิ่มฟีเจอร์ Agent เข้ามาในผลิตภัณฑ์ของตัวเอง ล่าสุดคือ BigQuery เพิ่ม Data Engineering Agent เข้ามาช่วยแก้ปัญหางานวิศวกรรมข้อมูลที่สิ้นเปลืองเวลา

Data Engineering Agent ใช้โมเดล Gemini มาช่วยสร้าง data pipeline ในรูปแบบต่างๆ โดยผู้ใช้สามารถสั่งงาน Agent ด้วยภาษาธรรมชาติ เช่น Create a pipeline to load data from the 'customer_orders' bucket, standardize the date formats, remove duplicate entries, and load it into a BigQuery table named 'clean_orders' แล้ว Agent จะสร้างคิวรี SQL ให้อัตโนมัติ ซึ่งรวมถึงการแก้ไข pipeline ของเดิมด้วย

By mk Founder on Tag: Thailand, Government, Big Data
Thailand

การประชุมคณะรัฐมนตรีประจำวันที่ 13 ธันวาคม 2565 มีมติเห็นชอบการตั้ง สถาบันคลังข้อมูลขนาดใหญ่แห่งชาติ (องค์การมหาชน) หรือ National Big Data Institute (NBDI) โดยเป็นการยกระดับ สถาบันส่งเสริมการวิเคราะห์และบริหารข้อมูลขนาดใหญ่ภาครัฐ (สวข.) ซึ่งปัจจุบันเป็นหน่วยงานอยู่ภายใต้สำนักงานส่งเสริมเศรษฐกิจดิจิทัล depa ออกเป็นองค์การมหาชนอีกแห่ง มีจำนวนบุคลากร 70 คนที่จะโอนไปอยู่ภายใต้ NBDI

การตั้ง National Big Data Institute มีอายุองค์กรเบื้องต้น 5 ปี เมื่อครบ 5 ปีแล้ว สำนักงาน ก.พ.ร. จะประเมินความคุ้มค่าตามตัวชี้วัดต่อไป

By workplace on Tag: Wisesight, Blognone Workplace, Big Data
Wisesight

นาทีนี้ ถ้าพูดถึงบริษัทบิ๊กดาต้าที่มีชื่อเสียงอันดับต้นๆ ในไทย คิดว่าหลายคนคงจะนึกถึง Wisesight เป็นที่แรก และนี่เป็นโอกาสดีที่ Blognone Workplace ได้โคจรมาพบกับ Wisesight อีกครั้ง หลังจากได้พูดคุยกันไปสักราวๆ 1-2 ปีก่อน

การกลับมาพูดคุยครั้งนี้ เราจะพาไปเจาะลึกว่า จนถึงตอนนี้ Wisesight เติบโตไปถึงขนาดไหน มีเป้าหมายอะไรรออยู่ข้างหน้า และประสบการณ์ที่จะได้หากเข้ามาเป็นส่วนหนึ่งของ Wisesight

รวมถึงเหตุผลที่ว่า ทำไม Wisesight ถึงเป็นสถานที่ที่เหมาะสมสำหรับคนทำงาน ที่อยากเข้าวงการเทคโนโลยี

By mk Founder on Tag: Apache Spark, Google Cloud, Serverless, Google, Big Data
Apache Spark

Apache Spark เป็นซอฟต์แวร์วิเคราะห์ข้อมูล big data แบบขนานที่ใช้งานกันอย่างแพร่หลาย และถูกนำไปให้บริการโดยคลาวด์หลายยี่ห้อ (เช่น Azure Databricks หรือ Amazon EMR) ถึงแม้เพิ่มความสะดวกในการดูแลระบบกว่าเดิม แต่ยังคงรูปแบบการเช่าเวลาเครื่องใช้งานเป็นชั่วโมงเหมือนคลาวด์ทั่วไป

ล่าสุด Google Cloud นำเอา Spark มาผสานกับแนวคิด Serverless ที่ไม่ต้องสนใจระบบคลัสเตอร์เบื้องหลังเลย เพราะตัวบริการจัดการเรื่องสเกลให้อัตโนมัติ และจ่ายเงินเฉพาะเท่าที่ใช้งาน

By sponsored on Tag: MSpire Academy, MFEC, Big Data
MSpire Academy

MSyne เปิดโครงการ MSpire Academy เพื่อรับน้องใหม่ไฟแรงที่สนใจเรื่อง Big Data & Data Analytics เข้ามาร่วม Workshop เรียนรู้เนื้อหาภาคทฤษฎีที่สำคัญ เพื่อปูพื้นฐานให้แน่น และฝึกภาคปฏิบัติกับข้อมูลที่หลากหลาย สัมผัสกับเคสที่ต้องพบในการทำงานจริง เพื่อพัฒนาศักยภาพด้าน Data อย่างเข้มข้น ด้วยหลักสูตร 2 เดือนเต็ม เตรียมความพร้อมให้คุณก้าวเข้าสู่สายงาน Data ได้อย่างมั่นใจ และทำงานร่วมกับลูกค้าระดับ Enterprise ในหลากหลายอุตสาหกรรม พร้อมกับทีม Mentor ที่จะคอยให้คำแนะนำในการทำงานอย่างใกล้ชิด "เทรนฟรี มีงานทำ"

By lew Founder on Tag: Google Cloud, Big Data
Google Cloud

บริการ BigQuery ของ Google Cloud นับเป็นบริการยอดนิยมอีกตัวของ Google Cloud โดยองค์กรนิยมนำมาใช้เก็บข้อมูลขนาดใหญ่ เนื่องจากกูเกิลคิดค่าบริการเฉพาะค่าเก็บข้อมูลและค่าคิวรีเท่านั้น ตอนนี้บริการ BigQuery เพิ่มฟีเจอร์จำกัดสิทธิ์การเข้าถึงข้อมูลระดับแถว (row-level security - RLS)

RLS เปิดให้ผู้ใช้กำหนดนโยบายการเข้าถึงข้อมูลแต่ละแถวตามฟิลด์เตอร์ที่กำหนดไว้ เช่น สาขาเจ้าของข้อมูล ผลกระทบของการจำกัดสิทธิ์เช่นนี้ทำให้การคิวรีโดยผู้ใช้คนละคนจะคิวรีได้ผลไม่เหมือนกัน หน้าจอ BigQuery จะขึ้นเตือนไว้ว่าข้อมูลถูกกรองจากสิทธิ์เข้าถึงข้อมูล

By sunnywalker Writer on Tag: IBM, Artificial Intelligence, Code, Programming, Big Data
IBM

ในงาน Think 2021 ของ IBM มีประกาศเปิดตัวโปรเจกต์ CodeNet ชุดข้อมูลขนาดใหญ่ที่สร้างขึ้นเพื่อสอน AI เขียนโปรแกรม โดยชุดข้อมูลประกอบด้วยตัวอย่างโค้ด 14 ล้านชุดรวม 500 ล้านบรรทัด และในภาษาโปรแกรมที่แตกต่างกันไปกว่า 55 ภาษา ตั้งแต่ที่ยังมีนิยมใช้งานคือ C++, Java, Python และ Go ไปจนถึงภาษาดั้งเดิมอย่าง COBOL, Pascal และ FORTRAN

By sunnywalker Writer on Tag: Microsoft Azure, Big Data, Thailand
Microsoft Azure

ไมโครซอฟท์ประเทศไทยเปิดตัว Azure Synapse Analytics แพลตฟอร์มดึงข้อมูล, จัดการและวิเคราะห์ข้อมูลได้ในแพลตฟอร์มเดียว สามารถดึงข้อมูลจากหลายแหล่งทั้งบนคลาวด์ มัลติคลาวด์ และ On Premise มาจัดการและวิเคราะห์ออกมาเป็นแดชบอร์ดในรูปแบบกราฟให้เห็นภาพได้ง่าย ลดปัญหาการทำงานหลายแพลตฟอร์ม

ไมโครซอฟท์บอกว่า Synapse จะเป็นผลิตภัณฑ์เรือธงในสายงาน Data ต่อจากนี้ และยังบอกด้วยว่าในประเทศไทย มีองค์กรในหลากหลายอุตสาหกรรมที่ใช้งาน Azure Synapse มี 13 บริษัทในดัชนี SET50 ด้วย

By sponsored on Tag: Artificial Intelligence, Big Data, Advertorial
Artificial Intelligence

AI หรือ Artificial Intelligence เทคโนโลยีที่คนทั่วโลกต่างรู้จัก และกำลังมาแรงในโลกธุรกิจ ทำให้องค์กรจำนวนมากมีความพยายามนำ AI มาประยุกต์ใช้เพื่อเพิ่มขีดความสามารถในการแข่ง จะเห็นได้จาก Gartner’s Hype Cycle for Emerging Technology ประจำปี 2020 นั้น มี AI เป็นส่วนประกอบ 1 ใน 3 ของเทรนเทคโนโลยีที่กำลังมาแรงที่สุด

หนึ่งในสาขาของ AI ที่มีการนำมาประยุกต์ใช้ในธุรกิจมากในระยะหลังคือ machine learning หรือการเรียนรู้ของเครื่องจักร เป็นการพัฒนา AI ด้วยการสร้างแบบจำลองสมองหรือ neural network เพื่อเรียนรู้การทำงานจากตัวอย่างข้อมูลที่ถูกป้อนเข้าไป ซึ่งสามารถแก้ปัญหาที่มีความซับซ้อนมากกว่าการพัฒนา AI ในรูปแบบดั้งเดิม

By lew Founder on Tag: Google Cloud, Big Data
Google Cloud

Google Cloud ประกาศพาบริการยอดนิยมของตัวเองอย่าง BigQuery ไปรันบนคลาวด์คู่แข่งทั้ง AWS และ Azure ในชื่อบริการ BigQuery Omni โดยยังใช้คอนโซล BigQuery เดิมบน Google Cloud แต่ไม่ต้องโยกข้อมูลข้ามคลาวด์ไปมา

กูเกิลระบุว่าเทคโนโลยีด้านล่างนั้นใช้ Anthos เป็นเลย์เยอร์สำหรับการรันเอนจิน BigQuery ซึ่งน่าจะแปลว่ากูเกิลไปเปิดคลัสเตอร์ Kubernetes ขึ้นใหม่เพื่อรันคิวรีแม้จะไม่ได้บอกไว้ตรงๆ ก็ตาม

By mk Founder on Tag: Health, Big Data
Health

BlueDot บริษัทสตาร์ตอัพจากแคนาดาที่พัฒนาระบบแจ้งเตือนโรคระบาดด้วย Big Data สามารถแจ้งเตือนการระบาดของไวรัสอู่ฮั่นได้ตั้งแต่วันที่ 31 ธันวาคม ก่อนหน่วยงานของทางการหลายวัน (CDC ของสหรัฐอเมริกา ประกาศเตือนวันที่ 6 มกราคม, WHO ประกาศเตือน 9 มกราคม)

อัลกอริทึมของ BlueDot ใช้การสแกนข่าวสารในภาษาต่างประเทศ 65 ภาษา (ในที่นี้รวมเว็บบอร์ดและบล็อก), ข้อมูลจากเครือข่ายโรคพืชและสัตว์ รวมถึงประกาศจากหน่วยงานรัฐบาลของประเทศต่างๆ จากนั้นส่งต่อให้นักระบาดวิทยา (epidemiologist) วิเคราะห์อีกชั้นว่าข้อมูลถูกต้องไหมในเชิงวิทยาศาสตร์

By lew Founder on Tag: Microsoft Azure, Storage, Big Data, Cloud Computing
Microsoft Azure

เมื่อสองวันก่อนไมโครซอฟท์เปิดตัว Azure Synapse บริการคิวรีข้อมูลขนาดใหญ่ ที่อัพเกรดมาจาก Azure SQL Data Warehouse ที่งาน Ignite ผมมีโอกาสพูดคุยกับ John Macintyre ผู้จัดการกลุ่มสินค้า Azure Synapse ได้ข้อมูลเพิ่มเติมถึงบริการตัวนี้

By lew Founder on Tag: Microsoft Azure, Big Data
Microsoft Azure

ไมโครซอฟท์อัพเกรดบริการ Azure SQL Data Warehouse และเปิดตัวใหม่ในชื่อ Azure Synapse บริการประมวลผลข้อมูลระดับเพตาไบต์โดยชูความเร็วในการคิวรีในที่เร็วกว่า Google Big Query และ Amzon Redshift อย่างมาก

ในเดโมบนเวทีงาน Microsoft Ignite ไมโครซอฟท์โชว์ว่าการคิวรีทดสอบ Synapse ทำสำเร็จภายใน 9 วินาทีขณะที่ Big Query ใช้เวลาถึง 11 นาที

ค่าบริการคิดเป็นหน่วยเทราไบต์ เริ่มต้นที่ 1.2 ดอลลาร์ต่อเทราไบต์ต่อชั่วโมงรวมค่าประมวลผลแล้ว หากหยุดการประมวลผลจะคิดค่าเก็บข้อมูล 0.17 ดอลลาร์ต่อเทราไบต์ต่อชั่วโมง เทียบกับ BigQuery ที่คิดค่าบริการตามการคิวรีวเป็นครั้งๆ ไป ที่ 5 ดอลลาร์ต่อเทราไบต์

By blognonetomorrow on Tag: Blognone Tomorrow, Big Data
Blognone Tomorrow

ในยุคที่ทุกองค์กรบอกว่ามีการใช้ข้อมูล Big Data เพื่อปรับปรุงบริการให้ดีขึ้น วิเคราะห์เพื่อหาช่องทางสร้างรายได้ใหม่ๆ ไปจนถึงการใช้ปัญญาประดิษฐ์ (AI) เพื่อเรียนรู้พฤติกรรมของลูกค้า คำถามสำคัญคือ Data เป็นเพียงแค่คำเท่ๆ เพื่อให้ดูดี หรือสามารถนำมาใช้งานได้จริงๆ กันแน่

สุดท้ายแล้วข้อมูลที่แต่ละองค์กรเก็บมา สามารถนำไปใช้ได้จริงอย่างไร มีการเปลี่ยนแปลงอะไรที่มาถึงตัวผู้บริโภคโดยเป็นบทเรียนจากข้อมูลเหล่านั้นบ้าง ส่วนแบ่งปันประสบการณ์จากองค์กรมีประสบการณ์การปรับปรุงสินค้าและบริการจริง พวกเขารู้ได้อย่างไรว่าต้องใช้ข้อมูลอะไร, ได้ข้อมูลเหล่านั้นมาจากไหน และแปลงข้อมูลมาเป็นการปรับปรุงบริการได้อย่างไร

By mk Founder on Tag: MapR, HPE, Acquisition, Big Data, Enterprise
MapR

ชะตาชีวิตของ MapR บริษัทสาย Big Data/Hadoop ที่กำลังตกที่นั่งลำบาก ลงเอยด้วยการขายกิจการให้กับยักษ์ใหญ่ Hewlett Packard Enterprise (HPE) โดยไม่เปิดเผยมูลค่า

การซื้อกิจการ MapR ของ HPE ครั้งนี้ไม่ได้เป็นการซื้อบริษัทตรงๆ แต่เป็นการซื้อทรัพย์สิน (business assets) ที่ประกอบด้วยเทคโนโลยี, สิทธิบัตร, ทรัพย์สินทางปัญญา และบุคลากรบางส่วน เข้าไปอยู่ภายใต้ธุรกิจด้านข้อมูลของ HPE ที่ใช้ชื่อว่า Intelligent Data Platform

By mk Founder on Tag: MapR, Hadoop, Big Data
MapR

MapR Technologies หนึ่งในบริษัทที่พัฒนาซอฟต์แวร์ด้าน Big Data (อิงจาก Hadoop/Spark แต่เพิ่มฟีเจอร์ของตัวเองลงไป) เริ่มออกอาการไม่ค่อยดี หลังบริษัทแจ้งต่อสำนักงานแรงงานของรัฐแคลิฟอร์เนียว่า อาจต้องปลดพนักงานออก 122 คน และปิดสำนักงานใหญ่ที่เมือง Santa Clara หากบริษัทไม่สามารถหาเงินทุนก้อนใหม่ได้ทันวันที่ 14 มิถุนายนนี้

MapR แจ้งว่าก่อนหน้านี้เจรจากับนักลงทุนรายหนึ่ง แต่เมื่อผลประกอบการไตรมาสล่าสุดของบริษัทออกมาแย่ (บริษัทอยู่นอกตลาดหลักทรัพย์ จึงไม่เผยข้อมูลผลประกอบการต่อสาธารณะ) ทำให้นักลงทุนตัดสินใจถอนตัวออกไป ตอนนี้บริษัทกำลังเจรจากับนักลงทุนรายใหม่อยู่

By mk Founder on Tag: .NET, F#, C#, Microsoft, Apache Spark, Big Data, Development
.NET

Apache Spark กลายเป็นซอฟต์แวร์มาตรฐานในการวิเคราะห์ข้อมูลขนาดใหญ่แบบเรียลไทม์ แต่ภาษาโปรแกรมที่เชื่อมต่อกับ Spark ได้ยังจำกัดอยู่แค่ภาษา Java, Python, Scala, R, SQL เท่านั้น

ไมโครซอฟท์จึงเอาใจชาว .NET ด้วยการเปิดตัว .NET for Apache Spark เพื่อให้สามารถใช้ภาษาตระกูล .NET (C#, F#) เชื่อมต่อกับ Spark ได้ด้วย

.NET for Apache Spark เป็นซอฟต์แวร์โอเพนซอร์ส เปิดโค้ดบน GitHub ทำงานข้ามแพลตฟอร์มได้ทั้งบนวินโดวส์ ลินุกซ์ แมค โดยตอนนี้ยังอยู่ในสถานะพรีวิว ต้องใช้ร่วมกับ .NET Core 2.1 ขึ้นไป

By arjin Writer on Tag: China, Big Data
China

ใครที่ติดตามข่าวเกี่ยวกับประเทศจีน อาจคุ้นกับระบบ Social Credit ที่รัฐบาลเก็บ Big Data ต่าง ๆ ของประชากร แล้วนำมาให้เป็นคะแนนเครดิตทางสังคมสำหรับแต่ละบุคคล โดยแนวทางคือคนที่ได้คะแนนดีก็จะได้สวัสดิการหรือผลประโยชน์เพิ่มเติม ส่วนคนที่คะแนนไม่ดีก็อาจจะเข้าถึงบริการต่าง ๆ ได้ยากขึ้น

By nismod Writer on Tag: Grab, Thailand, Big Data, Tourism
Grab

ททท. หรือการท่องเที่ยวแห่งประเทศไทยประกาศความร่วมมือกับบริษัท GrabTaxi ประเทศไทยเพื่อนำ Big Data ในส่วนของนักท่องเที่ยวต่างชาติที่ใช้แพลตฟอร์ม Grab มาประกอบการทำแคมเปญรณรงค์เรื่องการท่องเที่ยวในประเทศ

By arjin Writer on Tag: China, Big Data
China

สำนักข่าว Bloomberg รายงานว่าหน่วยงานของปักกิ่ง เมืองหลวงของจีน ได้กำหนดแผนงานว่าภายในปี 2020 จะเริ่มใช้ระบบให้คะแนนเชิงสังคมประชาชนเป็นรายบุคคล (Social Rating) กับคนในปักกิ่ง 22 ล้านคน โดยระบบดังกล่าวจะเพิ่มหรือลดคะแนนจากข้อมูลพฤติกรรมความประพฤติต่าง ๆ ซึ่งหากคะแนนดีก็จะได้สวัสดิการผลประโยชน์มากขึ้น ขณะที่คนที่คะแนนต่ำก็จะร้องขอสิ่งต่าง ๆ ยากขึ้น

Subscribe to Big Data