Di chuyển cơ sở hạ tầng phân tích dữ liệu quy mô lớn sang Amazon Redshift
Hiệu suất tương đương với tại chỗ hiện tại, chi phí hoạt động là 1/2
kèo bóng đá ý video, chịu trách nhiệm kèo bóng đá ý xếp hạng người xem TV/Radio, đã áp dụng Amazon Redshift, một dịch vụ kho dữ liệu từ Amazonwebservice (sau đây gọi là AWS) làm cơ sở để phân tích một lượng lớn dữ liệu kèo bóng đá ý Bằng cách di chuyển từ các thiết bị kho dữ liệu mà chúng tôi đã sử dụng cho đến bây giờ đến Amazon Redshift, chúng tôi đã đạt được việc giảm đáng kể chi phí hoạt động và kiểm soát chi phí thông qua việc mở rộng tài nguyên linh hoạt và giảm tài nguyên trong khi duy trì hiệu suất phân tích
Thách thức và hiệu ứng
Khảo sát-
- Thiết bị kho dữ liệu "IBM NETEZZA" đã được sử dụng để phân tích cho đến bây giờ đã hết bảo trì, và nó đã trở nên cần thiết để chọn và giới thiệu một nền tảng mới
- Để chuẩn bị cho sự tăng trưởng dữ liệu trong tương lai, chúng tôi cần tìm một giải pháp có hiệu suất tương tự như IBM Netezza, nhưng có sự linh hoạt hơn trong việc mở rộng tài nguyên
- Từ góc độ tối ưu hóa chi phí hoạt động, cần có một giải pháp có thể tăng hoặc giảm tài nguyên của cơ sở hạ tầng kho dữ liệu theo yêu cầu
Hiệu ứng-
- Bây giờ có thể nén chi phí vận hành của cơ sở hạ tầng kho dữ liệu trong năm năm tới đến một nửa
- Áp dụng Amazon Redshift, dịch vụ đám mây, công việc quản lý hoạt động được sắp xếp hợp lý
- Hỗ trợ kỹ thuật CTC cung cấp sự chuyển đổi suôn sẻ sang Amazon Redshift
Giới thiệu dữ liệu phỏng vấn trường hợp
- Tên công ty
- Công ty TNHH kèo bóng đá ý Video,
- Vị trí
- 6-17 Sanbancho, Chiyoda-ku, Tokyo
- thành lập
- ngày 20 tháng 9 năm 1962
- url
- https: //wwwvideorcojp/
-
Công ty TNHH kèo bóng đá ý Video,
Giám đốc Cục IT1, CNTT và công nghệ quảng cáo
OTA MASA
-
Công ty kèo bóng đá ý video, Ltd
Cục quảng bá công nghệ IT/Công nghệ IT 3
MR Tsuji Mizuki
Khám phá các tùy chọn mới khi thiết bị hết bảo trì
Video Research Co, Ltd là một công ty thực hiện các cuộc khảo sát về xếp hạng người xem cho các phương tiện truyền thông đại chúng, bao gồm các chương trình truyền hình và chương trình phát thanh Được thành lập vào năm 1962 với các khoản đầu tư chung từ các cơ quan quảng cáo và các công ty phát sóng tư nhân, hiện tại đây là công ty duy nhất ở Nhật Bản thực hiện các cuộc khảo sát xếp hạng cho truyền hình và phát sóng vệ tinh trên mặt đất Cuộc khảo sát hàng tuần của công ty về xếp hạng người xem hộ gia đình trung bình có tác động rất lớn đến người sáng tạo/nhà tài trợ của chương trình, và cuối cùng là toàn bộ xã hội
Ngoài ra, kể từ tháng 10 năm 2016, công ty đã đưa ra một cuộc khảo sát hoàn toàn về "Xếp hạng người xem thời gian" cho các chương trình được người xem ghi lại và đã công bố nó là "Xếp hạng người xem tổng thể" kết hợp với "Xếp hạng người xem thời gian thực" cùng thời điểm phát sóng
Trong các khảo sát xếp hạng người xem này, dữ liệu chi tiết có được, bao gồm các thuộc tính như tuổi và giới tính của người xem, chẳng hạn như "WHO đã xem, khi nào và chương trình" của các hộ gia đình (màn hình) hợp tác với cuộc khảo sát Dữ liệu được tích lũy và tổng hợp trong hệ thống máy chủ và được phân tích từ nhiều góc độ khác nhau kèo bóng đá ý video trước đây đã sử dụng thiết bị kho dữ liệu IBM Netezza làm nền tảng cho phân tích lượng người xem như vậy
"Vào năm 2012, công ty của chúng tôi đã giới thiệu IBM Netezza và đã sử dụng nó để phân tích lượng người xem và các mục đích khác IBM Netezza có hiệu suất cao và đã làm rất tốt, nhưng khi kết thúc bảo trì, nó đã bắt đầu khám phá các lựa chọn mới cho cơ sở hạ tầng phân tích dữ liệu
Xác minh POC xác nhận các khả năng của Amazon Redshift; Quyết định giới thiệu công ty có quyền tự do mở rộng và giảm tài nguyên cao
kèo bóng đá ý video đã bắt đầu chọn cơ sở hạ tầng phân tích dữ liệu mới kể từ đầu năm 2017 Có hai lựa chọn chính mà công ty xem xét Đầu tiên, thay thế IBM Netezza hiện tại của bạn bằng phiên bản mới nhất của hệ thống IBM Puredata để phân tích Và cái khác là áp dụng một dịch vụ đám mây có thể là một giải pháp thay thế cho IBM Netezza
Công ty đã tham khảo ý kiến của kèo bóng đá Solutions (CTC), nhà cung cấp của IBM Netezza và yêu cầu CTC đề xuất một dịch vụ đám mây có thể thay thế IBM Netezza Đáp lại, CTC cuối cùng đã khuyến nghị sử dụng dịch vụ kho dữ liệu của AWS, Amazon Redshift
"Khi chúng tôi tiếp tục thảo luận với CTC, chúng tôi đã tiến hành POC (xác minh khái niệm) cho Amazon Redshift, tập trung vào hiệu suất Do đó, mặc dù không ở mức vượt qua IBM Netezza, chúng tôi có thể xác nhận rằng nó có thể sử dụng RED Có thể tăng hoặc giảm số lượng tài nguyên được sử dụng khi cần thiết để tối ưu hóa chi phí
Tại thời điểm này, vẫn còn thời gian trước khi IBM Netezza hết bảo trì Do đó, kèo bóng đá ý video cẩn thận mất khoảng hai tháng để triển khai dịch chuyển đỏ của Amazon, bao gồm cả di chuyển dữ liệu từ IBM Netezza
Tsuji nói: "Tôi tiếp tục cố gắng và lỗi vào một ngày khác, nhưng nhiệm vụ di chuyển/giới thiệu dữ liệu dễ dàng hơn nhiều so với tôi tưởng tượng"
Hiệu quả tuyệt vời trong việc cải thiện hiệu quả của các hoạt động quản lý hoạt động; Chi phí hoạt động sẽ là 1/2
Một nền tảng phân tích dữ liệu mới dựa trên Amazon Redshift đã được hoàn thành vào tháng 12 năm 2017 Nền tảng này chủ yếu được sử dụng để phân tích xếp hạng người xem thay đổi thời gian và được phân cụm với tối đa 22 nút
Mặc dù Amazon Redshift chỉ mới bắt đầu hoạt động, dịch vụ này đang mang lại các lợi ích thực hiện khác nhau cho kèo bóng đá ý video Một trong số đó là chi phí hoạt động thích hợp
"Cơ sở hạ tầng phân tích dữ liệu của chúng tôi hầu như không được sử dụng trong các ngày cuối tuần, ngày lễ hoặc đêm khuya Do đó, chúng tôi cố tình ngừng dịch vụ dịch chuyển đỏ của Amazon trong thời gian này để giảm chi phí lãng phí Netezza, "Ota nóiNgoài ra, ông Tsuji tiếp tục, hiệu quả của việc giảm tải hoạt động, có thể nói là duy nhất cho các dịch vụ đám mây, cũng nhỏ
"Với việc giới thiệu Amazon Redshift, không cần phải lo lắng về các lỗi phần cứng Tôi tin rằng việc vận hành và quản lý nền tảng đã được thực hiện ở một mức độ đáng kể", Tsuji nóikèo bóng đá ý video cũng rất ca ngợi hệ thống hỗ trợ của CTC, hỗ trợ việc thực hiện và vận hành Amazon Redshift
Chúng tôi đã có mối quan hệ kinh doanh với CTC kể từ "IBM Netezza, nhưng khi chúng tôi giới thiệu Amazon Redshift, chúng tôi đã được CTC giúp đỡ rất nhiều TsujiDựa trên sự hỗ trợ của CTC, kèo bóng đá ý video cũng đang xem xét mở rộng phạm vi hệ thống của mình để phân tích dữ liệu kết hợp dữ liệu bên ngoài, không chỉ là dữ liệu của người xem Ngoài ra, các mục tiêu khảo sát cho xếp hạng người xem thay đổi thời gian đang mở rộng trên khắp Nhật Bản và dữ liệu được phân tích bởi Amazon Redshift dự kiến sẽ tăng nhiều hơn nữa Amazon Redshift, có khả năng mở rộng cao, có khả năng tiếp tục đóng một vai trò quan trọng như là nền tảng để phân tích dữ liệu quy mô lớn như vậy
