(UA) IT/Tech Ukrainians in Canada

[t301435992]

Можна вивантажити на С3 та через Glue та Athena щось зробити, але складність росте експоненційно

[t301435992]

Ні, джоїнів не можна.

[t301435992]

Ну і там всілякі перцентілі, аверадж, сума.

[t139189834]

а можна джоін на тих самих логах?

[t301435992]

Одна лог-група

[t139189834]

агрегації? яким чином

[t301435992]

Трошки коштує грошей, але якщо не постійно, то ок

[t139189834]

я заходив туди, але скоуп запиту тільки один лог і не дозволяє в джоіни

[t301435992]

І там вже є like, not like, строкові функції, агрегації, тощо

[t301435992]

Легше коли логи json Але строку модна також розібрати. І так, тре використовувати CloudWatch Insights, вибираєш лог групу і в запиті фільтруєш за лог стрімом.

[t301435992]

Взагалі, якщо це одноразова операція і записів небагато, то можна використати IN(...) як фільтр і просто побудувати кілька запитів один за одним. Значення, нажаль, доведеться руками копіювати

[t301435992]

А далі? Я не знаю як обробити клаудвотч-логи нодою крім їх завантаження на локальний диск або С3

[t139189834]

але в мене доступу не дали до аксес кій

[t301435992]

Нажаль 🙁 Або я такого способу не знаю

[t139189834]

та можна накидати скрипт мабуть на ноді

[t385802988]

Це дивлячись, скільки загальна сума кредиту. В мене виходило в районі $1700 загальна переплата за 7 років. Там вона найбільша за перший рік і поступово знижується.

[t137218996]

Через Athena

[t295016920]

Мій улюблений❤️

[t301435992]

Ми самі страждаємо, я просто пишу в лог трохи більше. Така собі денормалізація.

[t301435992]

www.transposit.com/devops-blog/incident-management/2019.12.13-querying-cloudwatch-logs-with-athena/ Афіною точно можна