Detail publikace
Heterogeneity-Aware Scheduler for Stream Processing Frameworks
Škoda Petr, RNDr. (UPGM FIT VUT)
Smrž Pavel, doc. RNDr., Ph.D. (UPGM FIT VUT)
rozvrhování, posouzení zdrojů, měření výkonnosti, zpracování proudů, Apache Storm, heterogenní clustery, posouzení heterogenity, alokace zdrojů
Tento článek diskutuje problémy a rozhodnutí spojené s plánováním zpracování proudů dat v heterogenních clusterech. Nejprve je popsán současný stav v oblasti zpracování proudů dat v heterogenních clusterech, přičemž článek se zaměřuje především na problematiku alokace zdrojů a jejich plánování. Dále jsou představeny běžná řešení v rámcích pro zpracování proudů dat a na jednoduché aplikaci jsou ukázány nevýhody uvedených řešení při použití v heterogenních prostředích. Nakonec článek představuje vlastní plánovač využívající znalosti heterogenního prostředí pro rámce zpracovávající proudy dat, který je využívá znalosti z návrhové fáze i výsledků měřená výkonu z fáze provozu aplikací pro zpracování proudů dat. Článek ukazuje, že představený plánovač překonává alternativní řešení v plánování nasazení aplikace na heterogenním clusteru a vede k lepšímu využití clusteru.
@ARTICLE{FITPUB10729,
author = "Marek Rychl\'{y} and Petr \v{S}koda and Pavel Smr\v{z}",
title = "Heterogeneity-Aware Scheduler for Stream Processing Frameworks",
pages = "70--80",
journal = "International Journal of Big Data Intelligence",
volume = 2,
number = 2,
year = 2015,
ISSN = "2053-1397",
doi = "10.1504/IJBDI.2015.069090",
language = "english",
url = "https://www.fit.vut.cz/research/publication/10729"
}