Big Data

Big Data

VNPT BigData Platform là nền tảng tập trung và phân tích xử lý dữ liệu lớn, phục vụ đa dạng đối tượng khách hàng, từ các cơ quan chính phủ đến các doanh nghiệp nhỏ lẻ... Dựa trên nguyên tắc lưu trữ và xử lý phân tán dữ liệu, VNPT BigData Platform có thể dễ dàng đáp ứng khả năng xử lý các nguồn dữ liệu lớn, góp phần nhanh chóng đưa ra được các dịch vụ mới cũng như tối ưu hóa, thông minh hóa các dịch vụ hiện hữu.

VNPT BigData Platform cũng có thể giúp Chính phủ tăng khả năng điều hành, quản lý, tiết kiệm chi phí và vận hành hệ thống; hỗ trợ doanh nghiệp tối ưu hệ thống kỹ thuật, mạng lưới, tiết kiệm chi phí và tạo lợi thế cạnh tranh rõ rệt, giúp khách hàng cá nhân được trải nghiệm những dịch vụ thông minh.
Kể từ thời điểm chính thức đưa vào hoạt động năm 2017, nền tảng VNPT BigData luôn được phát triển, mở rộng và tối ưu hơn. Các công nghệ lưu trữ, cơ sở dữ liệu mới, các thuật toán học máy, mạng neural network không ngừng được nghiên cứu và đưa vào áp dụng cho các bài toán phù hợp nhất để tối ưu hóa các kết quả phân tích cũ và mới. Từ năm 2018, VNPT BigData Platform được giao nhiệm vụ làm nền tảng cốt lõi để xây dựng và phát triển dự án Hồ Dữ Liệu Data Lake tập trung, trở thành tâm điểm duy nhất tổng hợp toàn bộ dữ liệu của Tập đoàn VNPT.

Hệ thống VNPT Bigdata gồm có các thành phần chính như sau:

Các nguồn dữ liệu (Data Source): Toàn bộ dữ liệu nội bộ VNPT (Viễn thông, công nghệ thông tin, log…) và dữ liệu ngoài VNPT (Social,…)

Hạ tầng lưu trữ dữ liệu phân tán: Hạ tầng lưu trữ phân tán cho phép lưu trữ hàng Peta bytes (PB). Nhiều tiến trình xử lý song song với năng lực cho phép xử lý hàng TB/s đáp ứng các bài toán Realtime với lưu lượng throughput hàng Gb/s, cùng các bài toán đa chiều (multi dimension) cho phép tính toán các KPI đa chiều trên các hệ thống Intelligence đáp ứng thời gian thực.

Visualization: Sử dụng nền tảng, thư viện hàng đầu thế giới cho phép biểu diễn và hiển thị từ những visualization đơn giản như các biểu đồ, cho đến những phân bố phức tạp hơn trên bản đồ và những biểu diễn phức tạp trên những visualization quan hệ đa chiều giúp nhà phân tích và người ra quyết định có những hình dung cụ thể và trực quan.

Trí tuệ nhân tạo/Học máy (AI/ML): Để xử lý được hàng TB dữ liệu cho ra được những kết quả có ý nghĩa mong muốn không thể không kể đến nền tảng khối AI trong thành phần xử lý của Big Data, cho phép dễ dàng sử dụng nhiều thuật toán khác nhau, linh hoạt và xây dựng mô hình theo từng bài toán cụ thể để đưa ra những kết quả mà không thể xử lý thủ công bởi con người.