야솔아빠의 블로그

Splunk UF에 OpenTelemetry Collector를 설치하여 사용하는 방법입니다.K8s가 아닌 host 기반 환경에서 다량의 openTelemery collector를 deployment server로 관리 할 수 있는 장점이 있습니다.https://docs.splunk.com/Documentation/OTC/1.2.0/manual/About About the Splunk Add-on for OpenTelemetry Collector - Splunk DocumentationAbout the Splunk Add-on for OpenTelemetry Collector Use the Splunk Add-on for OpenTelemetry Collector to collect traces and ..

Splunk/Observability 2024. 5. 1. 11:56

Splunk Otel Collector를 설치하다보면, port 충돌이 발생하거나, 불필요한 서비스를 disable 시켜야 한다. 또한 1초 interval로 보다 빠르게 metric을 수집해야 할 때도 있다. 결국, default ECS EC2 config 설정을 활용할 수 없다. AWS Parameter Store 방식으로 해결할 수 있다. 첨부 파일 참고.

Splunk/Observability 2024. 4. 2. 23:01

splunk otel collector는 ECS 환경에서 커스터마이징 하는 방법입니다. workaround 방법이지만 쉽게 응용할 수 있습니다. splunk-otel-collector container definition에 아래 처럼 정의합니다. "entryPoint": [ "sh", "-c" ], "command": [ "curl --fail $CONFIG_URL > /etc/otel/collector/ecs_ec2_config.yaml && exec /otelcol" ], "environment": [ ... { "name": "CONFIG_URL", "value": "https://raw.githubusercontent.com/InhoJung/custom-splunk-otel-collector/ma..

Splunk/Observability 2024. 3. 23. 22:13

1. 관련 ref: https://docs.splunk.com/Observability/gdi/health-checker/health-checker.html#health-checker Health Checker — Splunk Observability Cloud documentation Was this topic useful? Was this documentation topic helpful? Please select Yes No Please specify the reason Please select The topic did not answer my question(s) I found an error I did not like the topic organization Other Enter your ema..

Splunk/Observability 2023. 3. 27. 14:53

User Profile에서 timezone을 변경하면 됨. 위 이미지처럼 GMT 기준의 메시지를 Local timezone으로 변경하기 위해서는 사용자 profile 에서 timezone을 변경한다.

Splunk/Observability 2022. 12. 27. 17:21

환경: AWS ECS Fargate 아래 doc의 일부 metric을 수집하고 싶은데, 스플렁크 Observability의 Metric Finder 에서 AWS ECS 관련 메트릭이 조회가 되지 않음. https://docs.aws.amazon.com/AmazonCloudWatch/latest/monitoring/Container-Insights-metrics-ECS.html Amazon ECS Container Insights metrics - Amazon CloudWatch Amazon ECS Container Insights metrics The following table lists the metrics and dimensions that Container Insights collects for ..

Splunk/Observability 2022. 12. 26. 11:24

https://registry.terraform.io/providers/splunk-terraform/signalfx/latest/docs/resources/detector Terraform Registry registry.terraform.io 위 예제를 참고하여 실습을 진행. example 소스에 빨간색 박스 관련 내용을 추가해야 한다. 최종 테라폼 파일 (detector.tf) resource "signalfx_detector" "application_delay" { count = length(var.clusters) name = "Inho max average delay - ${var.clusters[count.index]}" description = "my application is slow -..

Splunk/Observability 2022. 12. 23. 16:26

Terraform 으로 EKS cluster 를 만들었음. K8s cluster name: test-eks-cluster EC2 instances : 2ea 위 K8s cluster (test-eks-cluster)에 helm chart를 이용하여 otel collector 설치함. 상태 확인: 아래 이미지 처럼 Node를 1 증가 시키도록 Node group을 업데이트 함. [기존] Desired Size: 2 Maximum size: 3 노드가 증가한 것을 AWS console 에서 확인후 자동으로 otel collecotor 가 증가하는 지 확인 아래 이미지 처럼 otel-collector가 3개로 증가한 것을 확인 할 수 있음.

Splunk/Observability 2022. 11. 28. 11:43