Datové hřiště - zpracování proudu událostí s Azure Stream Analytics nakopnuté Terraformem

Minule jsem k projektíku datového hřiště https://github.com/tkubica12/dataplayground popsal generování dat a dnes se mrkneme na zpracování té proudové části s využitím Azure Stream Analytics. To samé se pak někdy příště pokusím udělat v Databricks s využitím Structured Streaming. Čeká nás pak určitě i ETL s Data Factory, zpracování s Databricks,...

29. 8. 2022

Téma:  Data Analytics  Automatizace  Stream Analytics 

---

Datové hřiště - generátory fake dat do kontejneru zabalené Terraformem v Azure nahozené

Dnes se v rámci svého miniprojektu na plně automatizované datové hřiště https://github.com/tkubica12/dataplayground zaměřím na první část - generování dat. Úvod do toho proč se do něčeho takového pouštím a jak to má fungovat najdete v předchozím článku

22. 8. 2022

Téma:  Data Analytics  Automatizace 

---

Datové hřiště - jak si hrát s daty bez sebemenšího kliknutí s Terraform a Azure

Chci se vzdělat v datové oblasti a neznám lepší způsob než si všechno vyzkoušet. Jenže většinou jsem v příkladech nalezl hromadu klikání, skriptování a závislost na existujících datech a to se mi nelíbí. Chci 100% automatizovatelné opakovatelné hřiště zcela bez jakýchkoli závislostí - na spuštění Terraformu chci všechno od založení...

19. 8. 2022

Téma:  Data Analytics  Automatizace  Databricks  Data Factory  SQL 

---

Proč je snazší rozprášit lidstvo v šachu, než v Halo nebo Battlefield aneb Reinforcement Learning pro zelenáče

Počítač sice v roce 1997 porazil Kasparova v šachu, ale v té době se ve střílečce Quake v podobě nepřátel choval jako dement - snadno jsem ho porazil díky lepší taktice. Vypadalo to, že Deep Blue je prostě jen nadrcený - v něčem variabilnějším, třeba ve hře go, nemá šanci....

21. 7. 2022

Téma:  AI  ML pro zelenáče 

---

Kubernetes pro velká data a strojové učení - proč AzureML nebo Apache Spark používá projekt Volcano?

Pokud ze světa infrastruktury a kontejnerů jako já nakouknete přes řeku k borcům od zpracování dat a strojového učení nejde se nevšimnout, že si tam hrají s virtuálkama, nad které si dávají Spark, Hadoop a podobné nástroje, které jim mají umožňit nahazovat jednotlivé úkoly nad takto spravovanou infrastrukturou. Mezitím svět...

18. 7. 2022

Téma:  AI  Kubernetes 

---