Phân tích bản ghi là gì?

Kể từ khi chúng tôi bắt đầu tạo các hồ sơ do máy tính tạo, chúng tôi đã cố gắng phân tích hàng loạt các hồ sơ đó. Hồ sơ được tạo ra từ các thiết bị, ứng dụng, mạng (và hơn thế nữa), và sau đó được sắp xếp theo trình tự thời gian thành các bản ghi. Nhiều khi các bản ghi này không được ghi lại đầy đủ hoặc hình thành nhất quán trên các ứng dụng hoặc thiết bị, điều này càng cho thấy sự cần thiết phải phân tích bản ghi.

Phân tích bản ghi có thể trả lời các câu hỏi phân tích vận hành có giá trị, như danh sách bên dưới. Hãy tưởng tượng bạn có câu trả lời trong thời gian thực cho những câu hỏi sau đây:

• Cơ sở hạ tầng của tôi có hoạt động không?
• Độ trễ và tỷ lệ lỗi là gì?
• Điều gì đã khiến ứng dụng của tôi gặp sự cố?
• Có bất kỳ hoạt động xác thực đáng ngờ nào không?
• Địa chỉ IP này đã truy cập dữ liệu nào?
• Có trường hợp gian lận không?
• Nội dung/sản phẩm nào mà người dùng của tôi quan tâm?
• Tính năng nào được sử dụng nhiều nhất hoặc ít nhất?
• Người dùng nào hoạt động nhiều nhất và tại sao?

Để tìm hiểu sâu hơn về lợi ích của phân tích bản ghi, hãy xem bài nghiên cứu này từ Omdia.

Người sử dụng chính thực hiện phân tích bản ghi là kỹ sư DevOps, nhân viên đảm bảo độ tin cậy của trang web và kiến trúc sư doanh nghiệp.

Chiến lược phân tích nhật ký của bạn cần giải quyết việc tải nhập, chuyển đổi và làm phong phú dữ liệu, chiến lược lập chỉ mục và phân mảnh dữ liệu, lập kế hoạch cơ sở hạ tầng và cuối cùng là vòng đời dữ liệu và lưu trữ dữ liệu. Dưới đây là các bước chung cần thực hiện: 

1. Trước tiên, bạn cần xác định chuyển động dữ liệu hoặc quá trình tải nhập dữ liệu. Về cơ bản, bạn phải tìm ra lộ trình tải nhập dữ liệu.

2. Bước thứ hai, bạn cần lập chuyển đổi dữ liệu của các dòng hoặc chuỗi trong bản ghi. Phân tích bản ghi nhiều thời điểm hoạt động với JSON, một định dạng chuyển đổi dữ liệu một cách thích hợp và làm phong phú dữ liệu nếu cần thiết.

3. Bước thứ ba, bạn phải xác định chiến lược lập chỉ mục và phân mảnh. Việc tạo đúng chỉ mục là điều cần thiết.

4. Bước thứ tư, bạn cũng phải lập kế hoạch cơ sở hạ tầng để tìm ra loại phiên bản và số lượng phiên bản bạn cần.

5. Cuối cùng, để kiểm soát kích thước và chi phí bản ghi, bạn cần một chiến lược tổng thể về vòng đời và lưu trữ dữ liệu.

Dễ dàng triển khai và quản lý

Dịch vụ OpenSearch của Amazon giúp dễ dàng thiết lập và triển khai cụm của bạn, đồng thời loại bỏ sự phức tạp liên quan đến các tác vụ quản lý, chẳng hạn như cung cấp phần cứng, cài đặt và vá lỗi phần mềm, phục hồi sau lỗi, sao lưu và giám sát, cho phép bạn giảm chi phí vận hành và tập trung vào yêu cầu kinh doanh cốt lõi.

Có được quy mô và độ tin cậy

Với dung lượng lưu trữ phiên bản lên đến 3 PB trong một miền, Dịch vụ OpenSearch của Amazon cho phép bạn dễ dàng thêm hoặc xóa phiên bản mà không mất thời gian ngừng hoạt động. Dịch vụ này cũng cung cấp tính năng mã hóa tích hợp khi đang lưu trữ và truyền, xác thực người dùng và hỗ trợ VPC, cho phép bạn bảo mật dữ liệu của mình.

Tích hợp dễ dàng với các dịch vụ AWS khác

Dịch vụ OpenSearch của Amazon cung cấp các tiện ích tích hợp sẵn với các dịch vụ AWS khác như Firehose dữ liệu Kinesis, Dịch vụ truyền được quản lý dành cho Kafka, IoT, Bản ghi CloudWatch, KMS, Cognito và IAM, để bạn có thể tải nhập, phân tích và hiển thị dữ liệu từ tất cả các nguồn một cách bảo mật.

Giảm chi phí của bạn

Với Dịch vụ OpenSearch của Amazon, bạn chỉ phải trả tiền cho những gì bạn sử dụng. Không áp dụng phí trả trước hay yêu cầu về mức độ sử dụng. Với tính năng giám sát 24x7 và hỗ trợ AWS, bạn không cần có một đội ngũ chuyên gia Elasticsearch để thay đổi quy mô, bảo mật và giám sát cơ sở hạ tầng, nhờ đó giúp giảm được tổng chi phí vận hành.

Giám sát ứng dụng và cơ sở hạ tầng thời gian thực

Nắm bắt và tập trung tất cả bản ghi và số liệu từ các ứng dụng và silo CNTT của bạn để có khả năng hiển thị sâu vào ngăn xếp ứng dụng và cơ sở hạ tầng của bạn đồng thời đảm bảo thời gian vận hành. Dịch vụ OpenSearch của Amazon lập chỉ mục dữ liệu, cung cấp dữ liệu để phân tích theo thời gian thực và cho phép bạn hiển thị các chỉ số hiệu suất theo thời gian thực bằng cách sử dụng bảng điều khiển Kibana.

Expedia Group, một trong những công ty du lịch hàng đầu thế giới, sử dụng Dịch vụ OpenSearch của Amazon để giám sát ứng dụng. Dịch vụ OpenSearch của Amazon cho phép Expedia theo dõi một khối lượng lớn bản ghi Docker một cách tiết kiệm, xác định và khắc phục sự cố theo thời gian thực, dễ dàng thay đổi quy mô để phù hợp với các nguồn bản ghi bổ sung và giảm thiểu chi phí vận hành.  Tìm hiểu thêm »

Phân tích nguyên nhân gốc rễ

Nhanh chóng xác định các vấn đề trong môi trường của bạn (máy chủ, mã), từ đó giảm thời gian trung bình để xác định (MTTI) và thời gian trung bình để giải quyết (MTTR). Với Kibana tích hợp sẵn, Dịch vụ OpenSearch của Amazon cho phép bạn tìm kiếm qua hàng triệu sự kiện và tìm mối tương quan trên các ứng dụng và cơ sở hạ tầng của bạn để nhanh chóng chẩn đoán nguyên nhân gốc rễ của vấn đề, nâng cao thời gian vận hành.

Autodesk, nhà cung cấp phần mềm kỹ thuật và thiết kế 3D hàng đầu, sử dụng các dịch vụ AWS bao gồm Dịch vụ OpenSearch của Amazon, Firehose dữ liệu Amazon Kinesis và Phân tích dữ liệu Amazon Kinesis để xây dựng giải pháp ghi hợp nhất tiết kiệm chi phí nhằm tìm và khắc phục các sự cố ứng dụng nhanh hơn cũng như cải thiện trải nghiệm của khách hàng.  Tìm hiểu thêm »

Phân tích dữ liệu vùng nhấp chuột

Xem trong thời gian thực về hiệu suất của nội dung web và hoạt động tương tác của người dùng với các ứng dụng và trang web của bạn, bao gồm hành vi người dùng, lượng thời gian đã sử dụng, nội dung phổ biến, v.v. Bằng việc sử dụng Dịch vụ OpenSearch của Amazon và Firehose dữ liệu Amazon Kinesis hoặc Dịch vụ truyền được quản lý của Amazon dành cho Kafka, bạn có thể dễ dàng tổng hợp và phân tích bản ghi vùng nhấp chuột của mình để hiểu sâu hơn về khách hàng.

Hearst Corporation, một công ty truyền thông lớn, đã xây dựng một nền tảng phân tích dữ liệu vùng nhấp chuột bằng cách sử dụng Dịch vụ OpenSearch của Amazon, Luồng Amazon Kinesis và Firehose Amazon Kinesis để truyền và xử lý 30 terabyte dữ liệu mỗi ngày. Với nền tảng này, Hearst đã có thể cung cấp toàn bộ luồng dữ liệu – từ lượt nhấp trang web đến dữ liệu tổng hợp – cho biên tập viên chỉ trong vài phút.  Tìm hiểu thêm »

Thông tin bảo mật và quản lý sự kiện (SIEM)

Tập trung và phân tích các sự kiện được tạo ra trên toàn bộ môi trường của bạn bao gồm các ứng dụng, mạng và hệ điều hành để xác định bất kỳ hoạt động độc hại hoặc đáng ngờ nào trong mạng của bạn. Dịch vụ OpenSearch của Amazon cho phép bạn lập chỉ mục dữ liệu ngay khi dữ liệu được tải nhập, cho phép bạn phân tích ngay dữ liệu từ nhiều nguồn, cũng như tìm và ngăn chặn các mối đe dọa nhanh hơn.