https://chechia.net/tags/kafka/ Recent content in Kafka on Che-Chia Chang https://chechia.net/%3Clink%20or%20path%20of%20image%20for%20opengraph,%20twitter-cards%3E https://chechia.net/%3Clink%20or%20path%20of%20image%20for%20opengraph,%20twitter-cards%3E Hugo -- 0.147.7 en Thu, 26 Sep 2019 22:50:32 +0800 https://chechia.net/posts/2019-09-26-kafka-ha-continued/ Thu, 26 Sep 2019 22:50:32 +0800 https://chechia.net/posts/2019-09-26-kafka-ha-continued/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <p>寫文章真的是體力活，覺得我的文章還有參考價值，請左邊幫我點讚按個喜歡，右上角幫我按個追縱，底下歡迎留言討論。給我一點繼續走下去的動力。</p> <p>對我的文章有興趣，歡迎到我的網站上 <a href="https://chechia.net">chechia.net</a> 閱讀其他技術文章，有任何謬誤也請各方大德直接聯繫我，感激不盡。</p> https://chechia.net/posts/2019-09-25-kafka-ha-topology/ Wed, 25 Sep 2019 22:50:32 +0800 https://chechia.net/posts/2019-09-25-kafka-ha-topology/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <p>寫文章真的是體力活，覺得我的文章還有參考價值，請左邊幫我點讚按個喜歡，右上角幫我按個追縱，底下歡迎留言討論。給我一點繼續走下去的動力。</p> <p>對我的文章有興趣，歡迎到我的網站上 <a href="https://chechia.net">chechia.net</a> 閱讀其他技術文章，有任何謬誤也請各方大德直接聯繫我，感激不盡。</p> https://chechia.net/posts/2019-09-25-kafka-operation-scripts/ Wed, 25 Sep 2019 22:50:32 +0800 https://chechia.net/posts/2019-09-25-kafka-operation-scripts/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <p>寫文章真的是體力活，覺得我的文章還有參考價值，請左邊幫我點讚按個喜歡，右上角幫我按個追縱，底下歡迎留言討論。給我一點繼續走下去的動力。</p> <p>對我的文章有興趣，歡迎到我的網站上 <a href="https://chechia.net">chechia.net</a> 閱讀其他技術文章，有任何謬誤也請各方大德直接聯繫我，感激不盡。</p> https://chechia.net/posts/2019-09-24-kafka-basic-usage/ Tue, 24 Sep 2019 21:59:49 +0800 https://chechia.net/posts/2019-09-24-kafka-basic-usage/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <p>寫文章真的是體力活，覺得我的文章還有參考價值，請左邊幫我點讚按個喜歡，右上角幫我按個追縱，底下歡迎留言討論。給我一點繼續走下去的動力。</p> <p>對我的文章有興趣，歡迎到我的網站上 <a href="https://chechia.net">chechia.net</a> 閱讀其他技術文章，有任何謬誤也請各方大德直接聯繫我，感激不盡。</p> https://chechia.net/posts/2019-09-23-kafka-introduction/ Mon, 23 Sep 2019 21:59:49 +0800 https://chechia.net/posts/2019-09-23-kafka-introduction/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <p>寫文章真的是體力活，覺得我的文章還有參考價值，請左邊幫我點讚按個喜歡，右上角幫我按個追縱，底下歡迎留言討論。給我一點繼續走下去的動力。</p> <p>對我的文章有興趣，歡迎到我的網站上 <a href="https://chechia.net">chechia.net</a> 閱讀其他技術文章，有任何謬誤也請各方大德直接聯繫我，感激不盡。</p> https://chechia.net/posts/2019-09-23-kafka-helm-configuration/ Mon, 23 Sep 2019 21:55:29 +0800 https://chechia.net/posts/2019-09-23-kafka-helm-configuration/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/ Sun, 22 Sep 2019 09:58:41 +0800 https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/ <p><a href="https://ithelp.ithome.com.tw/2020ironman">2020 It邦幫忙鐵人賽</a> 系列文章</p> <ul> <li>ELK Stack <ul> <li><a href="https://chechia.net/posts/2019-09-15-self-host-elk-stack-on-gcp/">Self-host ELK stack on GCP</a></li> <li><a href="https://chechia.net/posts/2019-09-15-secure-elk-stack/">Secure ELK Stask</a></li> <li><a href="https://chechia.net/posts/2019-09-18-monitoring-gce-with-elk/">監測 Google Compute Engine 上服務的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-19-monitoring-gke-with-elk/">監測 Google Kubernetes Engine 的各項數據</a></li> <li><a href="https://chechia.net/posts/2019-09-18-elastic-or-not-elastic/">是否選擇 ELK 作為解決方案</a></li> <li><a href="https://chechia.net/posts/2019-09-21-logstash-on-gke/">使用 logstash pipeline 做數據前處理</a></li> <li>Elasticsearch 日常維護：數據清理，效能調校，永久儲存</li> <li>Debug ELK stack on GCP</li> </ul> </li> <li>Kafka HA on Kubernetes(6) <ul> <li><a href="https://chechia.net/posts/2019-09-22-kafka-deployment-on-kubernetes/">Deploy kafka-ha</a></li> <li><a href="https://chechia.net/posts/2019-09-23-kafka-introduction/">Kafka Introduction</a></li> <li><a href="https://chechia.net/posts/2019-09-24-kafka-basic-usage/">kafka 基本使用</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-operation-scripts/">kafka operation scripts</a></li> <li><a href="https://chechia.net/posts/2019-09-25-kafka-ha-topology/">集群內部的 HA topology</a></li> <li><a href="https://chechia.net/posts/2019-09-26-kafka-ha-continued/">集群內部的 HA 細節</a></li> <li>Prometheus Metrics Exporter 很重要</li> <li>效能調校</li> </ul> </li> </ul> <p>由於我比較熟悉 GCP / GKE 的服務，這篇的操作過程都會以 GCP 平台作為範例，不過操作過程大體上是跨平台通用的。</p> <hr> <h1 id="碎念">碎念</h1> <p>30 天每天一文真的蠻逼人的，每一篇都是新寫，還要盡可能顧及文章品質，下班趕文章，各位大德寫看看就知道</p> https://chechia.net/posts/2019-09-09-ithome-ironman-challenge/ Mon, 09 Sep 2019 16:56:03 +0800 https://chechia.net/posts/2019-09-09-ithome-ironman-challenge/ 2019 IT邦幫忙鐵人賽