Việc tăng số lượng thiết bị, yêu cầu tuân thủ và nhu cầu kinh doanh để thu thập dữ liệu cho các sự kiện là điều cần thiết trong mọi loại hình kinh doanh.
Phân tích nhật ký có thể cung cấp cho bạn thông tin chi tiết thực sự về những gì đang diễn ra trong môi trường CNTT của bạn.
Một số ví dụ thời gian thực:
- lập kế hoạch công suất
- Phát hiện vấn đề sớm
- Báo cáo hiệu quả
- quản lý sẵn có
- giám sát sự kiện
Nếu bạn có một tệp nhật ký của một số MB, bạn có thể xem lại thủ công; tuy nhiên, khi bạn làm việc cho một công ty Trung bình đến Doanh nghiệp, nơi các bản ghi có sẵn trong GBphân tích nhật ký thủ công là một cơn ác mộng.
Nếu bạn đang tìm kiếm một giải pháp để giám sát và phân tích nhật ký ứng dụng web, bao gồm cả cơ sở hạ tầng, bạn có thể muốn xem xét quản lý nhật ký đám mây sau đây. Hầu hết đều có gói miễn phí với những hạn chế mà bạn có thể dùng thử để xem nó hoạt động như thế nào.
Nếu bạn đang tìm kiếm một giải pháp nguồn mở, hãy xem bài đăng này.
Dấu vết giấy tờ
Quản lý và phân tích nhật ký với Paper Trail.
Tập hợp tất cả nhật ký ứng dụng, nhật ký hệ thống và tài liệu nhật ký văn bản vào một nơi. Bạn có thể sử dụng API, dòng lệnh hoặc trình duyệt để thực hiện tìm kiếm theo thời gian thực.
Papertrail ngay lập tức cảnh báo bạn và cung cấp cho bạn khả năng phát hiện và lưu trữ các xu hướng. Tận hưởng tìm kiếm nhật ký nhanh như chớp trong vài giây. Máy phân tích này rất dễ sử dụng, hiểu và thực hiện. Bạn có thể hiểu rõ hơn về các hệ thống khác nhau ngay lập tức.
Tận dụng phân tích tốc độ nhật ký của nó và khắc phục sự cố đột biến được ghi lại trong những phút hoặc giờ qua.
Graylog
Graylog do đám mây phân phối cung cấp khả năng quản lý nhật ký liền mạch, linh hoạt và hiệu quả, tránh gánh nặng chi phí vận hành hoặc cơ sở hạ tầng. Nó được thiết kế cho những khách hàng muốn thu thập dữ liệu liền mạch, tìm kiếm nhanh, phân tích linh hoạt và khả năng chi trả cao hơn mà không gặp rắc rối khi bảo trì và cập nhật hệ thống mà nó chạy trên đó.
Công cụ này cho phép phạm vi bảo hiểm lớn hơn, giảm chi phí, giảm rủi ro, bảo mật quá trình truyền dữ liệu và cung cấp cơ sở hạ tầng đáng tin cậy và có thể mở rộng. đảm bảo 99,9% thời gian hoạt động, giúp bạn tự tin về tính khả dụng của nó. Bạn cũng sẽ nhận được quá trình truyền dữ liệu được mã hóa và xác thực với dữ liệu được lưu trữ trong một năm, đảm bảo rằng mọi thứ bạn cần đều sẵn sàng.
đám mây linh hoạt
Rất có thể bạn đã nghe nói về Tìm kiếm đàn hồi. Sự thật?
Tìm thông tin nhanh chóng và dễ dàng với Đám mây linh hoạt.
Nó cũng cho phép bạn hiểu rõ hơn và theo dõi các khoản đầu tư công nghệ trên các nền tảng như Google Cloud, Amazon Dịch vụ web (AWS) hoặc Microsoft Azure. Hãy để Đám mây đàn hồi vận hành và duy trì các giải pháp của bạn để bạn chỉ có thể tập trung vào việc thu thập thông tin chuyên sâu hơn để duy trì hoạt động kinh doanh của mình.
Đám mây đàn hồi cung cấp trải nghiệm tìm kiếm mạnh mẽ phù hợp với các ứng dụng, trang web hoặc nơi làm việc của bạn. Nó cung cấp cho bạn các công cụ có thể đưa trải nghiệm tìm kiếm của bạn ra thị trường và mở rộng quy mô một cách nhanh chóng. Với sự trợ giúp của nó, bạn có thể dễ dàng tìm thấy nội dung của mình.
Nó cũng cho phép bạn hợp nhất các nền tảng như Salesforce, Google Drive, v.v. theo cách tìm kiếm tự nhiên và được cá nhân hóa. Tận dụng Elaticsearch trong các ứng dụng của bạn và bổ sung cho chúng các API nâng cao, kiểm tra mức độ liên quan, phân tích mạnh mẽ và bảng điều khiển trực quan.
Kết hợp tất cả các dấu vết, số liệu và nhật ký APM trong một ngăn xếp quy mô lớn để phản ứng và ứng phó với các sự kiện xung quanh. Thêm dữ liệu của bạn và trực quan hóa nó trong một lần bằng cách kéo và thả trong Kibana Lens. Bảo mật đàn hồi giúp phát hiện và ngăn chặn các mối đe dọa bằng cách tích hợp SIEM đàn hồi với bảo mật điểm cuối.
Điều này bao gồm các quy trình pháp y chuyên sâu, tích hợp ngày càng tăng và quản lý trường hợp để ngăn chặn các mối đe dọa làm hỏng dữ liệu của bạn. Ngăn xếp đàn hồi của anh ấy bao gồm Elaticsearch, Beats, Logstash và Kibana.
Grafana
Tìm kiếm các giải pháp Grafana được lưu trữ?
Sử dụng nền tảng được quản lý hoàn toàn của Grafana để quan sát cơ sở hạ tầng và ứng dụng của bạn, bao gồm bảng điều khiển, nhật ký và số liệu.
Tận dụng các chỉ số Graphite, nhật ký Loki và chỉ số Prometheus trên nền tảng có hiệu quả cao và khả dụng này. Với nền tảng này bên cạnh bạn, bạn không cần phải tìm kiếm nhiều công cụ và tab vì tất cả dữ liệu và nguồn dữ liệu đều có sẵn ở một nơi.
Grafana cung cấp chế độ xem tập trung các cảnh báo và truy vấn trên các phiên bản Prometheus. Nó cũng cung cấp thời gian lưu giữ 13 tháng để lập kế hoạch dung lượng và phân tích xu hướng. Có cái nhìn bao quát hơn về ngăn xếp ứng dụng của bạn với hơn 40 phần bổ trợ dành cho các nguồn dữ liệu tiêu chuẩn và doanh nghiệp.
Thêm nguồn vào Grafana Cloud chỉ bằng một cú nhấp chuột hoặc API thật dễ dàng. Bắt đầu với phiên bản Grafana của bạn một cách nhanh chóng vì nó không yêu cầu cài đặt hay cấu hình. Chỉ cần chọn phần bổ trợ và bắt đầu nhập trang tổng quan phổ biến. Giá Grafana Cloud bắt đầu từ $49/tháng.
Dữ liệuDog
Tác động đến DataDog để theo dõi nhật ký, theo dõi yêu cầu và số liệu trên một nền tảng duy nhất. Nhanh chóng tìm kiếm, phân tích và lọc nhật ký của bạn để khám phá dữ liệu và khắc phục sự cố.
DataDog cung cấp cho bạn khả năng phân tích nhật ký và khám phá chúng từ toàn bộ ứng dụng, nền tảng và dịch vụ. Bạn có thể nhanh chóng lọc và tìm kiếm nhật ký bằng cách sử dụng các thuộc tính được tạo tự động. Trực quan hóa dữ liệu nhật ký hoặc tạo cảnh báo bảng điều khiển.
Bạn có một cái nhìn rõ ràng về mọi thứ trong hệ thống của mình. Xoay vòng trực tiếp từ biểu đồ số liệu sang nhật ký có liên quan bằng cách sử dụng các thẻ tương tự như dịch vụ, máy chủ, v.v. Xoay vòng sang APM để xếp hạng nhật ký của bạn theo hiệu suất của nó. Xử lý và gửi bất kỳ nhật ký nào được tạo bởi cơ sở hạ tầng hoặc ứng dụng của bạn mà không có giới hạn.
Phân tích chuyên sâu để quyết định cách bạn sẽ tiến hành lập chỉ mục động bằng bộ lọc. DataDog cho phép bạn quan sát mọi khía cạnh trong thời gian thực với Live Tail, không yêu cầu lập chỉ mục. Lưu trữ những gì bạn muốn vì nó lưu trữ lịch sử tập trung và không để lại gì trên máy chủ của nó.
Tự động thu thập và gắn thẻ nhật ký và tích hợp chúng với các tính năng tích hợp. Bạn có thể tự động khía cạnh dữ liệu nhật ký chẳng hạn như mã trạng thái HTTP, vai trò, vùng khả dụng, v.v. Sử dụng các nhà cung cấp nhật ký bên thứ ba như Logstash, FluentD, NXlog và Rsyslog. Với DataDog, bạn có thể làm giàu nhật ký bằng công nghệ hoặc xây dựng các đường dẫn tùy chỉnh. Bạn có thể sao chép hoặc sửa đổi các quy trình để nắm bắt các khía cạnh và trường.
loggly
Loggly là một trong những công cụ quản lý nhật ký phổ biến nhất phân tích hầu hết mọi loại nguồn nhật ký, bao gồm cả những nguồn sau.
- Ứng dụng Internet – Apache, Nginx, PHP, Node.js, NET, Java, JavaScript
- hệ điều hành – Linux, Windows
Với Loggly, bạn có thể thu thập dữ liệu (nhật ký) để phân tích và tạo một bảng điều khiển có ý nghĩa để theo dõi các số liệu bạn cần. Và tất nhiên bạn có thể thực hiện tìm kiếm nhật ký từ giao diện Loggly.
Loggly có một tìm kiếm nâng cao nơi bạn có thể tùy chỉnh và lọc các giá trị văn bản đầy đủ, trường đơn và giá trị boolean. Bạn cũng có thể tích hợp với Email, PageDuty, Slack, HipChat, v.v. để kích hoạt cảnh báo.
SumoLogic
Có được khả năng hiển thị thời gian thực vào các hoạt động CNTT với SumoLogic để giám sát, phân tích, khắc phục sự cố và bảo mật các ứng dụng cũng như cơ sở hạ tầng kinh doanh.
Sumologic có tác nhân/bộ thu thập đám mây cần được cài đặt trên máy chủ để thu thập và gửi nhật ký tới Sumologic. Bạn có thể biến bất kỳ loại nhật ký nào thành bảng điều khiển thời gian thực để theo dõi và cảnh báo cho bạn khi bạn đạt đến ngưỡng.
Sumologic đã cấu hình sẵn một số ứng dụng dựa trên các trường hợp sử dụng phổ biến nhất để tăng tốc các tác vụ vận hành và điều tra sự cố.
Ví dụ ứng dụng:
- MongoDB – sức khỏe chung, tối ưu hóa truy vấn, giám sát bảo mật
- AWS Lambada – Giám sát chủ động, hiển thị chi phí, hiểu biết sâu sắc
- AWS – xác định các vấn đề về hiệu suất, giám sát bảo mật chủ động, phân tích nâng cao
- Lực lượng bán hàng – tăng khả năng thích ứng của người dùng, theo dõi kiểm toán, so sánh dữ liệu.
- Trend Micro – Phân tích lỗ hổng, lịch sử sự kiện, trực quan hóa cuộc tấn công nâng cao
- Github – trực quan hóa năng suất nhóm, năng suất nhóm, xây dựng cơ sở sử dụng.
- Docker – phân tích nâng cao, giải quyết vấn đề
- Linux – Khắc phục sự cố và Tối ưu hóa Hệ điều hành, Truy cập/Kiểm tra và Cảnh báo Sự kiện Bảo mật, Bảng điều khiển Hiệu suất.
- Nginx – tổng quan, vị trí khách truy cập, thời gian phản hồi, xác định tắc nghẽn hiệu suất.
- Apache – hiểu khách truy cập, tối ưu hóa hiệu suất, trực quan hóa khách truy cập.
- IIS – thông tin chi tiết toàn diện, chi tiết lưu lượng truy cập, trang chậm nhất
- MySQL – tình trạng chung, các lỗi phổ biến nhất, giám sát hiệu suất truy vấn
Trong tài khoản miễn phí, bạn sẽ nhận được 500 MB khối lượng mỗi ngày với bảy ngày lưu giữ dữ liệu với bất kỳ nguồn thu thập dữ liệu nào.
nhật ký
Logsen by Sematext là ngăn xếp ELK được quản lý trên đám mây của bạn để quản lý và phân tích nhật ký. Nhật ký có thể được gửi qua các kênh được mã hóa từ bất kỳ nguồn nào, kể cả Syslog.
Nó chạy trên AWS và tuân thủ SOC, SSAE, FISMA, DIACAP, HIPPA, v.v.
Kiểm tra THỬ để xem nó hoạt động như thế nào.
bắn tung tóe
Splunk Cloud có sẵn trên AWS để thu thập và lập chỉ mục mọi dữ liệu máy. Splunk là một cách nhanh chóng và dễ dàng để phân tích và trực quan hóa dữ liệu được tạo từ các thiết bị vật lý, đám mây hoặc ảo.
Với Splunk, bạn có thể theo dõi và trực quan hóa dữ liệu của mình cũng như định cấu hình ngưỡng số liệu cho cảnh báo. Tôi không thấy gói MIỄN PHÍ, nhưng họ có bản dùng thử cho phép bạn phân tích và hình dung 5 GB dữ liệu trong 15 ngày.
logz.io
Logz.io cung cấp ELK được lưu trữ dưới dạng dịch vụ. ELK (Elastic Search, Logstash, Kibana) là một trong những nền tảng phân tích nguồn mở phổ biến nhất. Nó có thể lập chỉ mục dữ liệu từ hầu hết tất cả các công nghệ mới nhất và cung cấp phân tích thông tin chi tiết có thể hành động với cảnh báo và trực quan hóa dữ liệu.
Một số công nghệ hỗ trợ
- Apache HTTP/Tomcat
- nginx
- Hadoop
- heroku
- Node.js
- MongoDB
- PostgreSQL
- các cửa sổ
- Linux
- AWS
Gói miễn phí cung cấp ba ngày lưu trữ với 1 GB dữ liệu mỗi ngày.
Gỗ
Nền tảng theo dõi thời gian thực, nền tảng ghi nhật ký tìm kiếm nhanh và lọc nâng cao được tích hợp vào ứng dụng.
Gỗ có thể được tích hợp vào ứng dụng và nền tảng của bạn.
Các thư viện có sẵn cho Node, Ruby và Elixir và hỗ trợ nhiều nền tảng bao gồm các nền tảng sau.
- kho lưu trữ
- zeit (bây giờ)
- Lambda AWS
- docker
- Linux
- heroku
- Kubernetes
Bạn có thể bắt đầu với gói MIỄN PHÍ để dùng thử nền tảng.
Đăng kí
Tôi hy vọng trình phân tích nhật ký đám mây ở trên sẽ giúp bạn tìm kiếm, phân tích và trực quan hóa dữ liệu cũng như hỗ trợ các hoạt động CNTT của bạn.
