TOP>Danh sách cột>Suy nghĩ về việc cải thiện môi trường dịch vụ riêng của công ty được xây dựng trên AWS - Dịch vụ dự báo tạo năng lượng tái tạo: Phiên bản xử lý kèo bóng đá châu âu khí tượng

kèo bóng đá châu âu Suy nghĩ về việc cải thiện môi trường dịch vụ của công ty được xây dựng trên AWS
~ Dịch vụ dự báo tạo năng lượng tái tạo: Phiên bản xử lý kèo bóng đá châu âu thời tiết ~

Giới thiệu

Xin chào, đây là Shigeno
Lần này, chúng tôi sẽ giới thiệu cách cải thiện môi trường AWS cho dịch vụ dự báo phát năng năng lượng tái tạo "dự báo E-PLSM" mà chúng tôi cung cấp
Vui lòng sử dụng điều này như một ví dụ về cách kèo bóng đá châu âu thời tiết được cung cấp bởi Cơ quan Khí tượng Nhật Bản và các tổ chức khác được xử lý trên AWS!

Dự báo E-PLSM là gì

Trước hết, trước khi chúng tôi đến chủ đề chính, chúng tôi muốn giới thiệu cho bạn dự báo E-PLSM Dự báo E-PLSM là một dịch vụ dự đoán lượng điện được tạo ra tại các nhà máy điện và năng lượng mặt trời trong vài giờ đến một tuần và cung cấp kèo bóng đá châu âu dự báo mỗi giờ
Bằng cách sử dụng nhiều mô hình dự báo số, chúng tôi cung cấp cả "dự đoán nhấn mạnh độ chính xác dự đoán ngắn hạn" và "dự đoán dài hạn" Chúng tôi cung cấp ba loại menu sau đây và bạn có thể chọn theo tình huống của bạn

  • Một mô hình đơn giản (Express) dự đoán việc phát điện từ thông tin thiết bị và kèo bóng đá châu âu dự báo thời tiết
  • Một mô hình (tiêu chuẩn) nhằm mục đích đạt được các dự đoán có độ chính xác cao bằng cách sử dụng máy học
  • Model (Premium) nhằm mục đích phản ánh các xu hướng thế hệ mới nhất và đưa ra dự đoán chính xác hơn bằng cách sử dụng kèo bóng đá châu âu về số lượng thế hệ gần đây nhất

*Vui lòng xem bên dưới để biết chi tiết

https: //wwwengineering-eyecom/e-plsm/forecasthtml
https: //wwwctc-gcojp/company/release/20241003-01795html

Thử thách liên quan đến xử lý kèo bóng đá châu âu thời tiết

Dự báo E-PLSM đang chạy trên AWS, nhưng với các vấn đề sau đây liên quan đến xử lý kèo bóng đá châu âu thời tiết:

  • Đây là một quy trình hàng loạt mỗi giờ mỗi giờ, nhưng không hiệu quả về chi phí vì nó chạy trên nhiều EC2
  • Không có môi trường CI/CD
  • Vị trí cho các nhật ký khác nhau chưa được hợp nhất và bảo trì cần có thời gian
  • Xử lý kèo bóng đá châu âu thời tiết được sử dụng như một quá trình phổ biến trong các dự án khác nhau, nhưng thường cần có thời gian để cải thiện môi trường

Đặc biệt, liên quan đến các vấn đề về cải thiện môi trường, mặc dù các chương trình xử lý theo kèo bóng đá châu âu thời tiết đã được áp dụng, cần có thời gian để chuẩn bị máy chủ và xây dựng môi trường vận hành, gây ra nút cổ chai trong phân tích kèo bóng đá châu âu và phát triển dịch vụ Mặc dù đây là một thách thức là một vấn đề truyền thống, chúng tôi không thể thực hiện các biện pháp

Chính sách phản hồi

Từ các vấn đề nói trên, chúng tôi đã xem xét các câu trả lời sau

  • Xử lý hàng loạt liên quan đến kèo bóng đá châu âu thời tiết được thực hiện với các chức năng Lambda + Bước
  • Các cài đặt khác nhau được xác định trong Bộ phát triển đám mây AWS (AWS CDK)
  • Mã được lưu trữ và quản lý bởi CodeCommit, và xây dựng và triển khai thông qua CodeBuild và CodePipeline
  • Các nhật ký khác nhau có thể được theo dõi bằng CloudWatch

Xử lý kèo bóng đá châu âu thời tiết có thể được chia thành các bước sau

  1. 1 Các cuộc gọi đến kèo bóng đá châu âu thời tiết khác nhau
  2. 2 Xác định vị trí để trích xuất kèo bóng đá châu âu thời tiết
  3. 3 Giải mã kèo bóng đá châu âu thời tiết
  4. 4 Tiền xử lý kèo bóng đá châu âu thời tiết

Xác định từng quy trình trong Lambda và thực hiện quy trình làm việc theo các chức năng bước di chuyển với kèo bóng đá châu âu thời tiết được lưu trữ trong S3 dưới dạng kích hoạt

Xin lưu ý rằng các ví dụ sau đây về kèo bóng đá châu âu thời tiết được sử dụng bao gồm kèo bóng đá châu âu mô hình dự báo số của Cơ quan Khí tượng Nhật Bản
Hầu hết các kèo bóng đá châu âu thời tiết như mô hình dự báo số của Cơ quan Khí tượng Nhật Bản được sử dụng theo định dạng Grib2, được chỉ định bởi Tổ chức Khí tượng Thế giới WMO
Có các chương trình xử lý kèo bóng đá châu âu Grib2 như Pygrib và WGRIB2 được cung cấp bởi Cơ quan Khí quyển và Đại dương Quốc gia (NOAA), nhưng bạn cần cẩn thận về khả năng tương thích với thời gian chạy Lambda

Hệ thống dự báo số
(viết tắt)
Khu vực dự báo và
Khoảng cách lưới
Thời gian dự báo
(số thành viên)
Số lượng thực thi
(thời gian giá trị ban đầu)
Mô hình cục bộ
(LFM)
2km quanh Nhật Bản 10 giờ 16 lần một ngày
(giờ khác với những thứ sau)
18 giờ 8 lần một ngày
(00,03,06,09,12,15,18,21UTC)
Mesomodel
(MSM)
5km quanh Nhật Bản 39 giờ 6 lần một ngày
(03,06,09,15,18,21UTC)
78 giờ Hai lần một ngày
(00,12UTC)
Mô hình toàn cầu
(GSM)
Tất cả Trái đất xấp xỉ 13km 5,5 ngày Hai lần một ngày
(06,18UTC)
11 ngày Hai lần một ngày
(00,12UTC)
Mesoensemble
Hệ thống dự báo
(MEPS)
Khoảng Nhật Bản 5km 39 giờ
(21 thành viên)
4 lần một ngày
(00,06,12,18UTC)

*Nội dung của bảng vào tháng 1 năm 2025

Kết quả và tóm tắt

Do đó, cấu hình sau đây đã được xem xét và thực hiện

Xử lý hàng loạt liên quan đến kèo bóng đá châu âu thời tiết được xây dựng bằng các hàm Lambda + Bước Tất cả các cài đặt khác nhau được xác định trong CDK và mã được lưu trữ và quản lý trong CodeCommit, và xây dựng và triển khai thông qua CodeBuild và CodePipeline, triển khai đường ống CI/CD được điều chỉnh theo chu kỳ phát triển cho môi trường dàn dựng và sản xuất Chúng tôi cũng hy vọng sẽ giảm đáng kể chi phí bằng cách thực hiện cấu hình này
Ngoài ra, vì nó đã được triển khai trong CDK, nên việc chuyển đổi nó sang các môi trường AWS khác dễ dàng hơn trước
Điều quan trọng cần lưu ý là tùy thuộc vào kích thước kèo bóng đá châu âu thời tiết, giới hạn bộ nhớ của Lambda (lên đến 10GB) hoặc giới hạn lưu trữ phù du (lên đến 10GB), vì vậy bạn nên xem xét sử dụng các dịch vụ như ECS và EFS

Cuối cùng

Là một người yêu thời tiết, tôi hy vọng rằng việc sử dụng kèo bóng đá châu âu thời tiết trên AWS sẽ trở nên phổ biến hơn nữa
Công ty chúng tôi có nhiều kỹ sư có kỹ năng xử lý cả AWS và kèo bóng đá châu âu thời tiết
Nếu bạn có bất kỳ câu hỏi nào liên quan đến việc sử dụng kèo bóng đá châu âu thời tiết trên AWS, xin vui lòng liên hệ với CTC!

CTC cung cấp một loạt các dịch vụ hỗ trợ hoạt động và xây dựng phù hợp với giai đoạn của khách hàng để sử dụng kinh doanh AWS
Một kỹ sư có kinh nghiệm sẽ cung cấp cho bạn hỗ trợ một cửa và linh hoạt
Xin vui lòng làm như vậyLiên hệ với chúng tôiLàm ơn

Liên hệ với chúng tôi

[Hồ sơ tác giả]

Shigeno Yosuke

kèo bóng đá Solution Architect

Chịu trách nhiệm phát triển và vận hành các hệ thống dự báo năng lượng tái tạo cho kinh doanh điện
Chúng tôi cũng đang phát triển Hệ thống hỗ trợ giao dịch điện và cung cấp cung và cầu (RERAS) do CTC cung cấp và dịch vụ dự báo phát điện cho các nhà máy điện và năng lượng mặt trời (dự báo E-PLSM)

2023, 2024 Nhật Bản AWS Tất cả các Kỹ sư Chứng chỉ, Người dự báo thời tiết

Shigeno Yosuke

TOP>Danh sách cột>Suy nghĩ về việc cải thiện môi trường dịch vụ riêng của công ty được xây dựng trên AWS - Dịch vụ dự báo khối lượng phát năng lượng tái tạo

Pagetop