Tối ưu hóa chi phí bằng đám mây kết hợp:
Di dời Dynalyst kết hợp tỷ lệ kèo bóng đá đêm nay SRE

Aoyama: Chủ đề lần này là "Chuyển sang cấu hình đám mây riêng và đám mây lai" Tôi muốn thảo luận về các vấn đề hồi cứu kỹ thuật xung quanh việc di dời tỷ lệ kèo bóng đá đêm nay ông Senju, người phụ trách phát triển "Dynalyst" và ông Hirata từ Trụ sở kinh doanh AI Tập đoàn SRE, người đã tham gia vào việc di dời

Trước hết, người đọc đặc biệt quan tâm đến lý do tại sao cần chuyển nền tảng phân phối quảng cáo hiện đang hoạt động "Dynalyst" từ đám mây công cộng sang đám mây riêng Hoàn cảnh đằng sau việc này là gì? Tôi nghĩ đó là vấn đề

Trước hết, vui lòng cho tôi biết thêm về điều đó

Ngàn tay: “Dynalyst” là nền tảng phân phối quảng cáo hiệu suất dành cho điện thoại thông minh do Trụ sở kinh doanh AI phát hành vào năm 2015 Nền tảng này chủ yếu cung cấp quảng cáo nhắm mục tiêu lại và quảng cáo thúc đẩy lượt cài đặt mới, có lưu lượng truy cập hàng trăm tỷ mỗi tháng, hàng trăm nghìn yêu cầu mỗi giây và có cơ sở hạ tầng để hỗ trợ phân tích dữ liệu và phân phối quảng cáo

Có hai lý do chính cho dự án di dời ``Dynalyst''

Đầu tiên là rủi ro tỷ giá Trong vài năm qua, đồng đô la Mỹ tiếp tục tăng giá và chúng tôi phải đối mặt tỷ lệ kèo bóng đá đêm nay tình trạng chi phí sử dụng các đám mây công cộng ở nước ngoài, bao gồm cả AWS, ngày càng tăng qua từng năm Bởi vì công ty chúng tôi sử dụng rộng rãi đám mây công cộng để phát triển sản phẩm nên phí hợp đồng và phí sử dụng là nguyên nhân trực tiếp làm tăng chi phí

Tất nhiên, trước tình huống này, chúng tôi đã xem xét các thành phần và kiến trúc trong sản phẩm, đồng thời thực hiện các biện pháp để cải thiện hiệu quả hoạt động và giảm chi phí Tuy nhiên, giá của đồng đô la đã tăng lên hàng năm và rất khó để bù đắp chi phí gia tăng do tỷ giá hối đoái chỉ bằng các biện pháp địa phương

Trong khi đó, như một biện pháp quyết liệt, chúng tôi đã chuyển hầu hết cấu hình hệ thống của Dynalyst sang đám mây riêng nội bộ của mình

Aoyama: Chắc chắn, tác động của sự tăng giá gần đây của đồng đô la là vấn đề đau đầu đối với các môi trường sử dụng đám mây công cộng ở nước ngoài Tại CIU, chúng tôi nhận được câu hỏi từ các sản phẩm nội bộ cho biết: ``Chúng tôi đang gặp khó khăn vì chi phí vận hành cơ sở hạ tầng của chúng tôi đã tăng nhiều hơn dự kiến do ảnh hưởng của tỷ giá hối đoái''

``Cycloud'' do chúng tôi phát triển và vận hành, được vận hành bởi hàng nghìn máy chủ vật lý trong nhiều trung tâm dữ liệu và được sử dụng trong hơn 200 dự án trong xem kèo bóng đá Chúng tôi xử lý các hoạt động đám mây tại các trung tâm dữ liệu trong nước của mình,Từ mua sắm đến lắp đặt thiết bị máy chủ GPU tiên tiến, chúng tôi đang xây dựng một môi trường có tác động đến chi phí bằng cách giới thiệu nó tỷ lệ kèo bóng đá đêm nay chi phí thấp và tốc độ

Đó là lý do tại sao, ngay cả trong thời điểm tỷ giá hối đoái có xu hướng dao động mạnh về phía đồng đô la trong ngắn hạn, việc có thể cung cấp môi trường đám mây ở mức giá tương đối thấp là một thế mạnh lớn, vì vậy, chúng tôi nghĩ rằng chúng tôi có thể sử dụng điều này làm thế mạnh cho hoạt động kinh doanh của mình trong những điều kiện thị trường này

Bây giờ, hãy cho chúng tôi biết lý do chuyển địa điểm thứ hai

Ngàn tay: Thay đổi thứ hai là mô hình kinh doanh của Dynalyst Trước đây, "Dynalyst" chủ yếu cung cấp quảng cáo nhắm mục tiêu lại, nhưng từ khoảng năm 2022, công ty này bắt đầu triển khai các phương thức quảng cáo mới để thúc đẩy lượt cài đặt mới

Lý do đằng sau điều này là những thay đổi trong môi trường thị trường quảng cáo tổng thể đang có tác động lớn đến chiến lược sản phẩm Đặc biệt, từ năm 2010 đến 2011, Apple đã giới thiệu "'' Tính năng cho phép người dùng giới hạn có chọn lọc việc theo dõi quảng cáo, tạo ra những hạn chế nhất định về việc nhắm mục tiêu lại các phương thức quảng cáo

Tại Dynalyst, để nhanh chóng đáp ứng những thay đổi này trong ngành, chúng tôi đã chuyển chiến lược của mình từ quảng cáo được nhắm mục tiêu sang quảng cáo trên phạm vi rộng Thông qua đó, chúng tôi mong muốn khuyến khích lượt cài đặt mới và tối đa hóa hiệu quả quảng cáo cho nhiều người dùng

Mặt khác, những thách thức kỹ thuật cũng nảy sinh Các quảng cáo nhắm mục tiêu lại trước đây đã được phân phối theo cách chính xác nhắm mục tiêu đến những người dùng cụ thể, điều này giúp giảm việc truyền dữ liệu Mặt khác, "quảng cáo phạm vi tiếp cận rộng" đã chuyển sang định dạng trong đó dữ liệu được phân phối đến nhiều người dùng hơn mà không bị giới hạn ở một mục tiêu cụ thể, dẫn đến việc truyền dữ liệu tăng đáng kể và do đó, phí sử dụng đám mây cũng tăng mạnh

Cùng tỷ lệ kèo bóng đá đêm nay tác động của tỷ giá hối đoái mà tôi đã đề cập trước đó, có thời điểm phí sử dụng Amazon EC2 và phí truyền dữ liệu chiếm khoảng 2/3 toàn bộ chi phí của hệ thống Dynalyst Nền tảng đằng sau điều này là chúng tôi không thể bỏ qua những thay đổi này trong cơ cấu chi phí của mình và việc xem xét cơ bản là cần thiết

Aoyama: Hiểu rồi Do sự kết hợp giữa các vấn đề rủi ro tiền tệ và yêu cầu kinh doanh liên quan đến những thay đổi trong môi trường thị trường quảng cáo tổng thể, cuối cùng họ đã cân nhắc chuyển sang Cycloud, một đám mây riêng Bạn có tiếp cận Senju-san tỷ lệ kèo bóng đá đêm nay tư cách là đầu mối liên lạc tỷ lệ kèo bóng đá đêm nay “Cycloud” không?

Ngàn tay: Đúng vậy Đầu tiên, tôi nghe nói rằng "Cycloud" không tính phí truyền dữ liệu từ các bộ cân bằng tải Khi chúng tôi tính toán thử bằng công cụ tính toán chi phí trên trang web Cycloud, chúng tôi nhận thấy rằng mình có thể tiết kiệm được ít nhất vài triệu yên mỗi tháng Số tiền này có tác động đáng kể nên chúng tôi quyết định rằng việc xác minh việc di dời là cần thiết

Khi tôi gửi yêu cầu của mình thông qua nút yêu cầu trên trang web "Cycloud", tôi đã nhận được phản hồi ngay lập tức từ người phụ trách Từ đó, cuộc trò chuyện tiến triển và dự án bắt đầu
 

Aoyama: Di dời một sản phẩm đang được sử dụng phải là một dự án có quy mô lớn Bạn đã bắt đầu từ đâu?

Ngàn tay: Khoảng đầu năm 2024, chúng tôi bắt đầu khảo sát kỹ thuật Ở giai đoạn đó, chúng tôi bắt đầu tỷ lệ kèo bóng đá đêm nay những bước chuẩn bị cần thiết tối thiểu, chẳng hạn như xây dựng cơ sở hạ tầng bằng công cụ tự động hóa xây dựng cơ sở hạ tầng "Ansible" Khi tôi tiếp tục nghiên cứu, điều đầu tiên tôi nhận ra là tôi không thể làm việc này một mình Tôi cảm thấy cần có sự hỗ trợ chuyên nghiệp, đặc biệt là khi liên quan đến cài đặt sử dụng Ansible và điều chỉnh cấu hình cơ sở hạ tầng Vì vậy, chúng tôi đã yêu cầu sự hỗ trợ từ nhóm chuyên gia SRE dành riêng cho Trụ sở Kinh doanh AI và ông Hirata đã tham gia tỷ lệ kèo bóng đá đêm nay tư cách là SRE

Hirata: Tôi bắt đầu tham gia dự án di dời Dynalyst vào khoảng đầu năm 2024 Chúng tôi bắt đầu bằng việc tham dự các cuộc họp định kỳ và lắng nghe về các vấn đề cũng như tiến độ Từ đó, chúng tôi bắt đầu tiến hành kiểm tra giao tiếp cho dịch vụ mạng "AWS Direct Connect", kết nối AWS và môi trường tại chỗ thông qua đường dây chuyên dụng, đồng thời tiến hành công việc liên quan

Qua các cuộc phỏng vấn, tôi nhận ra rằng nhóm phát triển Dynalyst có văn hóa kỹ thuật mang lại cảm giác cam kết và làm chủ, tỷ lệ kèo bóng đá đêm nay những người trẻ dẫn đầu và hướng tới kết quả kinh doanh lớn

Mr Senju đang là sinh viên mới tốt nghiệp năm thứ tư và đang làm giám đốc phát triển, đồng thời anh ấy đang thúc đẩy dự án tái định cư có trách nhiệm Các thành viên trong nhóm có mong muốn mạnh mẽ là khám phá công nghệ và kết quả kinh doanh, và tôi có thể cảm nhận được mong muốn của họ là dẫn dắt dự án di dời này đến thành công dù thế nào đi nữa

Ngàn tay: Sau khi giải quyết được vấn đề về độ trễ một thời gian, chi phí truyền thông của ``AWS Direct Connect'' để kết nối ``Cycloud'' và AWS bắt đầu trở thành nút cổ chai

Hirata: "AWS Direct Connect" là dịch vụ thiết lập mạng chuyên dụng giữa AWS và người dùng Vì không thông qua Internet nên tính bảo mật liên lạc cực kỳ cao và cung cấp kết nối ổn định, không bị ảnh hưởng bởi tắc nghẽn đường truyền hoặc biến động về điều kiện Tính năng này đã được sử dụng trong cấu hình đám mây lai Mặt khác, các chi phí như phí sử dụng đường truyền thuê riêng và phí sử dụng "AWS Direct Connect" rất cao

Trong cấu hình ban đầu, máy chủ bit đặt trên "AKE" đã truy cập cơ sở dữ liệu AWS "Aurora" thông qua "AWS Direct Connect" và chi phí liên lạc này là một gánh nặng lớn

Vì vậy, để đối phó, chúng tôi đã đặt cơ sở dữ liệu trên "Cycloud", tạo bản sao đọc của cơ sở dữ liệu trên AWS và tạo máy chủ bit trong "Cycloud" trực tiếp tham chiếu đến bản sao đọc đó tỷ lệ kèo bóng đá đêm nay thay đổi này, chúng tôi có thể giảm đáng kể hoạt động giao tiếp bằng AWS Direct Connect

Do quá trình chuyển đổi sang cấu hình đám mây kết hợp này diễn ra, chúng tôi đã đạt đến trạng thái có thể nói rằng quá trình di chuyển sang Cycloud đã hoàn tất vào giữa tháng 6 năm 2024

Aoyama: Đó là một kết quả tuyệt vời Nhân tiện, tôi nghĩ mục đích ban đầu là giảm chi phí Tôi cũng muốn biết về hiệu quả chi phí khi xử lý nhiều yêu cầu tỷ lệ kèo bóng đá đêm nay Cycloud

Ngàn tay: Về phí truyền dữ liệu tỷ lệ kèo bóng đá đêm nay AWS, việc di chuyển này đã khiến số tiền chuyển gần như bằng 0 và chúng tôi có thể giảm phí truyền dữ liệu và phí sử dụng EC2, vốn chiếm 2/3 phí sử dụng AWS Bằng cách áp dụng cấu hình đám mây lai, chúng tôi có thể nói rằng chúng tôi có thể tránh được rủi ro tiền tệ, một trong những mục đích của việc di dời này, trừ khi có biến động tỷ giá hối đoái cực kỳ khắc nghiệt

Aoyama: Có bất kỳ lợi ích tích cực nào khi có cấu hình đám mây lai mà bạn sẽ không nhận được nếu chỉ sử dụng AWS không?

Hirata: Một lợi thế lớn là khả năng chống hỏng hóc được cải thiện Tất nhiên, thật khó để tưởng tượng rằng tất cả các khu vực AWS sẽ ngừng hoạt động, nhưng ví dụ: nếu một số máy chủ bit và các thành phần liên quan ngừng hoạt động, tính liên tục trong kinh doanh của Dynalyst có thể được đảm bảo bằng cách tập trung tài nguyên vào Cycloud Điều ngược lại cũng đúng; nếu Cycloud xảy ra lỗi lớn, bạn có thể chuyển sang AWS Việc tạo ra một hệ thống mới bổ sung cho cả hai bên là một điểm cộng lớn

Ngàn tay: Về "Cycloud", có vẻ như có thêm một khu vực có thể quản lý chi phí Hiện tại có thể vận hành linh hoạt tùy theo tình huống, chẳng hạn như sử dụng đám mây công cộng khi đám mây riêng không thể trang trải chi phí hoặc trang trải chi phí bằng đám mây riêng khi đám mây công cộng không thể chịu được chi phí gia tăng

Tôi nghĩ ưu điểm độc đáo của cấu hình đám mây lai là nó có thể bù đắp cho những ưu điểm và nhược điểm của cả hai

Aoyama: Luôn có những vấn đề kỹ thuật và rắc rối liên quan đến việc di dời, nhưng từ góc độ SRE, bạn đã lưu ý những điều gì khi tiến hành dự án?

Hirata: Chúng tôi không chỉ tập trung vào việc giảm chi phí tài chính mà còn trực quan hóa tất cả các ưu điểm và nhược điểm trong hoạt động sau khi di chuyển và xây dựng quy trình làm việc cho phép nhóm đưa ra quyết định Vào thời điểm đó, chúng tôi tập trung vào việc đảm bảo hoạt động ổn định sau khi di dời bằng cách sử dụng các dịch vụ được quản lý do Cycloud cung cấp

Nếu đó không phải là dịch vụ được quản lý, chẳng hạn như "Redis", bạn sẽ cần xây dựng một hàm để chuyển đổi bản sao dự phòng khi bản gốc ngừng hoạt động Vào thời điểm đó, chúng tôi đã xác định từng vấn đề một, chẳng hạn như ``Việc triển khai này có khả thi trên thực tế không?'' ``Chúng tôi có thể kiểm tra nhật ký và phản hồi thích hợp trong trường hợp xảy ra lỗi không?'' ``Chúng tôi có hệ thống sẵn sàng để nhận cảnh báo và phản hồi nhanh chóng nếu lỗi xảy ra vào lúc nửa đêm không?''

Aoyama: Càng khó vận hành, chẳng hạn như MySQL và Redis có trạng thái, thì điều quan trọng hơn là phải xem xét chi phí vận hành không chỉ về mặt chi phí tính toán mà còn về những gì cần thiết cho hoạt động Lần này, tôi nghĩ chúng tôi đang chọn các công nghệ để tối đa hóa hiệu suất chi phí bằng cách sử dụng dịch vụ được quản lý cho phiên bản chính của MySQL và cho phần lưu trữ dữ liệu để lưu vào bộ nhớ đệm, chẳng hạn như ``Redis'', bằng cách kết hợp một cơ chế ``có thể được khôi phục ngay lập tức ngay cả khi nó gặp sự cố''

Hirata: Ưu điểm của đám mây riêng là chúng có thể giảm chi phí mua sắm và chi phí vận hành hệ thống nhưng không có nghĩa là chúng "miễn phí" Vận hành đám mây riêng đòi hỏi chi phí nhân sự và chi phí vận hành cho các thành viên liên quan, vì vậy điều quan trọng là phải cân bằng các chi phí này Bằng cách chọn một dịch vụ được quản lý phù hợp, có thể hiện thực hóa một thiết kế và vận hành chi trả toàn bộ chi phí vận hành, bao gồm cả hoạt động của các thành viên, vì vậy quan điểm này cũng có thể nói là cần thiết cho hoạt động của đám mây