概要 記事一覧はこちらです。 パフォーマンスのテストをするために kafka-producer-perf-test、kafka-consumer-perf-test というコマンドが用意されていましたので、それらを利用して今の環境でどれくらいのパフォーマンスを出せるのか確認してみます。 参照…

IntelliJ IDEA を 2019.2.1 → 2019.2.2 へバージョンアップする IntelliJ IDEA の 2019.2.2 がリリースされているのでバージョンアップします。 IntelliJ IDEA 2019.2.2 is here! https://blog.jetbrains.com/idea/2019/09/intellij-idea-2019-2-2-is-here/ …

概要 記事一覧はこちらです。 前回作成した consumer の metrics を収集・表示する仕組みで、いろいろ条件を変えてどのように表示内容が変わるのかを試してみます。 参照したサイト・書籍 目次 アプリケーションを動かして consumer の metrics を表示する p…

概要 記事一覧はこちらです。 Kafka の consumer の metrics を Prometheus、Grafana を使って収集・表示させてみます。 サーバから見た consumer 関連の metrics は lightbend/kafka-lag-exporter を使用して収集します。 クライアントから見た consumer の…

概要 記事一覧はこちらです。 Kafka の broker の metrics を Prometheus、Grafana を使って収集・表示させてみます。 参照したサイト・書籍 Kafka Monitoring with Prometheus, Telegraf, and Grafana https://medium.com/activewizards-machine-learning-c…

IntelliJ IDEA を 2019.1.4 → 2019.2.1 へバージョンアップする IntelliJ IDEA の 2019.2.1 がリリースされているのでバージョンアップします。 IntelliJ IDEA 2019.2: Java 13 Preview Features, Profiling Tools, Services Tool Window, and More https://…

概要 記事一覧はこちらです。 前回に続き Apache Avro を使用したメッセージ送受信についてもう少し試してみます。 参照したサイト・書籍 目次 kafka-avro-console-consumer で受信する スキーマを手動登録する TopicNameStrategy、RecordNameStrategy、Topi…

概要 記事一覧はこちらです。 今回は Schema Registry のサーバを起動して Apache Avro でメッセージを Serialize、Deserialize してみます。 参照したサイト・書籍 cp-docker-images/examples/multi-datacenter/docker-compose.yml https://github.com/conf…