dotnetomaniak.pl - Artykuły z tagiem kolejkidotnetomaniak.pl - Artykuły z tagiem kolejki2024-03-29T02:02:03Zhttps://dotnetomaniak.pl/Tags/kolejkiCopyright (c) dotnetomaniak.pldotnetomaniak.pl Atom Generatordotnetomaniak.pl webmasteradmin@dotnetomaniak.plhttps://dotnetomaniak.pl/Assets/Images/fav.icohttps://dotnetomaniak.pl/Assets/Images/dotnetomaniak_logo-negatyw_small.png5025https://dotnetomaniak.pl/Deduplikacja-zdarzen-w-Logstash-i-Redis-Wiadro-DanychDeduplikacja zdarzeń w Logstash i Redis - Wiadro Danych2021-08-31T19:08:20Z<div><div><div style="float:right"><img alt ="" src="http://dotnetomaniak.pl/Data/Thumbnails/small_RYFV2t3NoUuLO5v4rdxPRQ.png"/></div><div>Deduplikacja to W systemach rozproszonych występują tylko dwa trudne problemy:
Dostarczenie wiadomości dokładnie raz
Gwarantowana kolejność wiadomości
Dostarczenie wiadomości dokładnie raz.
Inny mi słowy: w tym wpisie zajmiemy się deduplikacją zdarzeń 😁. Ostatnio miałem z tym problem w SIEM’ie, więc padło na Logstash’a.Spis treścihide1Dlaczego jest to istotne?2Dlaczego Logstash?3Dlaczego Redis?4ImplementacjaKodFiltr rubyDziałanie5RepozytoriumPodziel się:Like this:RelatedDlaczego jest to...</div></div><div style="padding-top:4px"><a rev="vote-for" href="https://dotnetomaniak.pl/Deduplikacja-zdarzen-w-Logstash-i-Redis-Wiadro-Danych"><img alt="Podbij ↑" src="https://dotnetomaniak.pl/image.axd?url=https%3a%2f%2fwiadrodanych.pl%2fbig-data%2fdeduplikacja-zdarzen-logstash-redis%2f" style="border:0px"/></a></div></div>mszymczykhttps://dotnetomaniak.pl/Users/yBR97Zmw1ES3aCuyQj33bg2021-09-01T06:52:14Zhttps://dotnetomaniak.pl/Deduplikacja-zdarzen-w-Logstash-i-Redis-Wiadro-Danych1360Deduplikacja to W systemach rozproszonych występują tylko dwa trudne problemy:
Dostarczenie wiadomości dokładnie raz
Gwarantowana kolejność wiadomości
Dostarczenie wiadomości dokładnie raz.
Inny mi słowy: w tym wpisie zajmiemy się deduplikacją zdarzeń 😁. Ostatnio miałem z tym problem w SIEM’ie, więc padło na Logstash’a.Spis treścihide1Dlaczego jest to istotne?2Dlaczego Logstash?3Dlaczego Redis?4ImplementacjaKodFiltr rubyDziałanie5RepozytoriumPodziel się:Like this:RelatedDlaczego jest to...https://wiadrodanych.pl/big-data/deduplikacja-zdarzen-logstash-redis/http://dotnetomaniak.pl/Data/Thumbnails/small_RYFV2t3NoUuLO5v4rdxPRQ.pnghttps://dotnetomaniak.pl/Testy-kolejek-z-MassTransit-ADMU-BlogTesty kolejek z MassTransit – ADMU Blog2020-09-01T04:51:59Z<div><div><div style="float:right"><img alt ="" src="http://dotnetomaniak.pl/Data/Thumbnails/small_t6GxAljk-EKJqgCOpuzUug.png"/></div><div>Jakiś czas temu pisałem o testach w kontekście API (tutaj). W tym poście postaram się opisać jak napisać podobne testy, ale gdy nasza aplikacja komunikuje się poprzez kolejkę. Pokaże to z wykorzystaniem biblioteki MassTransit.</div></div><div style="padding-top:4px"><a rev="vote-for" href="https://dotnetomaniak.pl/Testy-kolejek-z-MassTransit-ADMU-Blog"><img alt="Podbij ↑" src="https://dotnetomaniak.pl/image.axd?url=https%3a%2f%2fwww.admu.pl%2ftesty-kolejek-z-masstransit%2f" style="border:0px"/></a></div></div>Admuhttps://dotnetomaniak.pl/Users/kfXzovc8A0uP7ZbvqtdsWQ2020-09-02T06:44:35Zhttps://dotnetomaniak.pl/Testy-kolejek-z-MassTransit-ADMU-Blog1640Jakiś czas temu pisałem o testach w kontekście API (tutaj). W tym poście postaram się opisać jak napisać podobne testy, ale gdy nasza aplikacja komunikuje się poprzez kolejkę. Pokaże to z wykorzystaniem biblioteki MassTransit.https://www.admu.pl/testy-kolejek-z-masstransit/http://dotnetomaniak.pl/Data/Thumbnails/small_t6GxAljk-EKJqgCOpuzUug.pnghttps://dotnetomaniak.pl/7-Powodow-Dla-Ktorych-Potrzebujesz-Kolejki-YouTube7 Powodów Dla Których Potrzebujesz Kolejki - YouTube2020-07-19T16:27:16Z<div><div><div style="float:right"><img alt ="" src="http://dotnetomaniak.pl/Data/Thumbnails/small_8yE-PGeQdUyqhVAnzVw5mQ.png"/></div><div>Kolejki można wykorzystywać zarówno na poziomie kodu i struktur danych jak i planując architekturę. Występuje w większości systemów rozproszonych.</div></div><div style="padding-top:4px"><a rev="vote-for" href="https://dotnetomaniak.pl/7-Powodow-Dla-Ktorych-Potrzebujesz-Kolejki-YouTube"><img alt="Podbij ↑" src="https://dotnetomaniak.pl/image.axd?url=https%3a%2f%2fyoutu.be%2f9m0vKUt_G8Q" style="border:0px"/></a></div></div>mszymczykhttps://dotnetomaniak.pl/Users/yBR97Zmw1ES3aCuyQj33bg2020-07-20T06:08:20Zhttps://dotnetomaniak.pl/7-Powodow-Dla-Ktorych-Potrzebujesz-Kolejki-YouTube2810Kolejki można wykorzystywać zarówno na poziomie kodu i struktur danych jak i planując architekturę. Występuje w większości systemów rozproszonych.https://youtu.be/9m0vKUt_G8Qhttp://dotnetomaniak.pl/Data/Thumbnails/small_8yE-PGeQdUyqhVAnzVw5mQ.pnghttps://dotnetomaniak.pl/Uzytecznosc-pustej-kolejki-Szymon-Kulec-ScooletzUżyteczność pustej kolejki | Szymon Kulec `Scooletz`2018-11-20T08:18:13Z<div><div><div style="float:right"><img alt ="" src="http://dotnetomaniak.pl/Data/Thumbnails/small_MfPRnL2dNUWA8npOSDVClw.png"/></div><div>Ostatnio, publikując stabilną wersję pakietu QueueBatch, dodałem do niego jedną opcję. Pozwala ona na "zauważenie" pustej kolejki i wykonanie jakiś operacji. W jakim celu to robić? Co można uzyskać? Zapraszam do artykułu.</div></div><div style="padding-top:4px"><a rev="vote-for" href="https://dotnetomaniak.pl/Uzytecznosc-pustej-kolejki-Szymon-Kulec-Scooletz"><img alt="Podbij ↑" src="https://dotnetomaniak.pl/image.axd?url=http%3a%2f%2fblog.scooletz.com%2f2018%2f11%2f20%2fon-usefulness-of-an-empty-queue%2f" style="border:0px"/></a></div></div>Scooletzhttps://dotnetomaniak.pl/Users/LtUVX6bMs0abZUMu84LL5A2018-11-21T06:36:22Zhttps://dotnetomaniak.pl/Uzytecznosc-pustej-kolejki-Szymon-Kulec-Scooletz21260Ostatnio, publikując stabilną wersję pakietu QueueBatch, dodałem do niego jedną opcję. Pozwala ona na "zauważenie" pustej kolejki i wykonanie jakiś operacji. W jakim celu to robić? Co można uzyskać? Zapraszam do artykułu.http://blog.scooletz.com/2018/11/20/on-usefulness-of-an-empty-queue/http://dotnetomaniak.pl/Data/Thumbnails/small_MfPRnL2dNUWA8npOSDVClw.pnghttps://dotnetomaniak.pl/22-O-wiadomosciach-z-Szymonem-Pobiega-DevTalk22 - O wiadomościach z Szymonem Pobiegą | DevTalk2015-09-21T05:44:58Z<div><div><div style="float:right"><img alt ="" src="http://dotnetomaniak.pl/Data/Thumbnails/small_3X9_U1wAz0a259KUoKyWqA.png"/></div><div>Dzisiaj technicznie-architektonicznie. Dwudziesty drugi odcinek DevTalka pod znakiem WIADOMOŚCI i KOMUNIKACJI stoi. Reflektor w te mgliste pojęcia kieruje Szymon Pobiega: programista/architekt, blogger, prelegent. Pracuje w Particular Software, gdzie klepie NServiceBusa dla Udiego Dahana (pamiętacie DevTalk#14 – CQRS with Udi Dahan?). Zatem: zdecydowanie wie o czym mówi!
Z rozmowy dowiecie się czym tak naprawdę jest komunikacja i dlaczego warto sobie zawracać głowę jakimiś “wiadomościami” czy “kolejkami...</div></div><div style="padding-top:4px"><a rev="vote-for" href="https://dotnetomaniak.pl/22-O-wiadomosciach-z-Szymonem-Pobiega-DevTalk"><img alt="Podbij ↑" src="https://dotnetomaniak.pl/image.axd?url=http%3a%2f%2fdevtalk.pl%2f2015%2f09%2f22-o-wiadomosciach-z-szymonem-pobiega%2f" style="border:0px"/></a></div></div>tuszczhttps://dotnetomaniak.pl/Users/kZG8vYmyCEugLHrTFxi8GQ2015-09-30T08:59:43Zhttps://dotnetomaniak.pl/22-O-wiadomosciach-z-Szymonem-Pobiega-DevTalk31530Dzisiaj technicznie-architektonicznie. Dwudziesty drugi odcinek DevTalka pod znakiem WIADOMOŚCI i KOMUNIKACJI stoi. Reflektor w te mgliste pojęcia kieruje Szymon Pobiega: programista/architekt, blogger, prelegent. Pracuje w Particular Software, gdzie klepie NServiceBusa dla Udiego Dahana (pamiętacie DevTalk#14 – CQRS with Udi Dahan?). Zatem: zdecydowanie wie o czym mówi!
Z rozmowy dowiecie się czym tak naprawdę jest komunikacja i dlaczego warto sobie zawracać głowę jakimiś “wiadomościami” czy “kolejkami...http://devtalk.pl/2015/09/22-o-wiadomosciach-z-szymonem-pobiega/http://dotnetomaniak.pl/Data/Thumbnails/small_3X9_U1wAz0a259KUoKyWqA.png