Ngân hàng NAB đang tiến hành hiện đại hóa quy trình dữ liệu cho nền tảng Ada của mình bằng cách chuẩn hóa cách xây dựng các quy trình dữ liệu, điều này không chỉ giúp giảm chi phí vận hành mà còn cung cấp các tính năng phục hồi mới.
Trong một sự kiện tại San Francisco, Dheeraj Puli, người đứng đầu bộ phận kỹ thuật độ tin cậy dữ liệu của NAB, đã thông báo rằng ngân hàng này sẽ sử dụng Spark Declarative Pipelines (SDP) cho hơn 1600 quy trình dữ liệu. Ada được xem là "chương hai" trong hành trình dữ liệu của ngân hàng, lần đầu tiên ra mắt vào năm 2022, với Databricks trên AWS là nền tảng cốt lõi. Ada đã thay thế nhiều nền tảng dữ liệu lớn, bao gồm NAB Data Hub (NDH) và môi trường Teradata đã 26 năm tuổi.
Chuẩn hóa quy trình dữ liệu
Theo Puli, việc chuẩn hóa quy trình dữ liệu cho phép ngân hàng giảm thiểu sự phức tạp và tùy chỉnh trong hoạt động của Ada. Hiện tại, việc nhập dữ liệu thô vào lớp đồng (bronze layer) đã được chuẩn hóa, và ngân hàng đang tiến hành hiện đại hóa các quy trình dữ liệu cho lớp bạc (silver layer) và lớp vàng (gold layer).
Các quy trình này vẫn dựa trên Spark nhưng được xây dựng theo nhiều cách khác nhau. Việc chuyển sang SDP sẽ giúp ngân hàng định nghĩa các bước xử lý dữ liệu một cách rõ ràng hơn, thay vì phải mã hóa từng bước như trước đây.
Các tính năng mới và tiết kiệm chi phí
NAB dự kiến sẽ tiết kiệm khoảng 15% chi phí vận hành khi chuyển hoàn toàn sang SDP. Hiện tại, ngân hàng đang chạy song song cả quy trình SDP và các quy trình Spark tùy chỉnh. Việc chuyển đổi này không chỉ mang lại hiệu quả mà còn cho phép NAB thử nghiệm các tính năng mới, như tính năng "rewind and replay", cho phép khôi phục quy trình đã thất bại về trạng thái nhất quán trước đó.
Puli cho biết, ngân hàng đã phát triển một mô-đun mã tùy chỉnh để đáp ứng yêu cầu kinh doanh cụ thể, nhưng tính năng "rewind and replay" có thể cung cấp một giải pháp tự nhiên hơn cho yêu cầu này.
Tương lai của nền tảng dữ liệu
Mục tiêu dài hạn của NAB là xây dựng một kiến trúc streaming hoàn toàn khai báo từ lớp đồng đến lớp vàng. Puli nhấn mạnh rằng ngân hàng mong muốn trở thành ngân hàng đầu tiên chạy 100% quy trình của mình trên SDP, thiết lập một tiêu chuẩn mới cho cách thức các tổ chức tài chính lớn xây dựng, vận hành và mở rộng các nền tảng dữ liệu.
Với những bước đi này, NAB không chỉ nâng cao hiệu quả hoạt động mà còn mở ra cơ hội cho sự đổi mới trong lĩnh vực dịch vụ tài chính, tạo ra một nền tảng vững chắc cho tương lai.
TH (phapluatxahoi.kinhtedothi.vn)
