https://www.computertrends.cz/ https://i.iinfo.cz/cw/rss-88x31.gif 88 31 https://www.computertrends.cz/n/hadoop/ Computertrends - Deník pro IT profesionály cs Fri, 27 Feb 2015 08:29:06 GMT https://www.computertrends.cz/aktuality/prvni-open-source-sada-pro-podnikova-big-data/?utm_source=rss&utm_medium=text&utm_campaign=rss Základní součásti sady – databáze pro datové sklady Greenplum Database s architekturou MPP, SQL systém HAWQ běžící na analytickém enginu Hadoop a in-memory databáze GemFire typu NoSQL – budou vůbec poprvé založeny na open source jádru. redakce@computertrends.cz (Computertrends: Pavel Louda) Fri, 27 Feb 2015 08:29:06 GMT www.computertrends.cz-actuality-51823 https://www.computertrends.cz/aktuality/big-data-maji-novou-asociaci-bude-prosazovat-hadoop/?utm_source=rss&utm_medium=text&utm_campaign=rss Někteří významní provozovatelé řešení pro big data chtějí zformovat novou oborovou asociaci s názvem Open Data Platform (ODP). ta má podporovat technologie big data založené na open source softwaru z ekosystému Apache Hadoop a optimalizovat testování u jednotlivých dodavatelů v rámci tohoto ekosystému. Cílem při tom je pomoci podnikům rychleji vytvářet a implementovat aplikace řízené daty. redakce@computertrends.cz (Computertrends: Pavel Louda) Tue, 24 Feb 2015 10:06:46 GMT www.computertrends.cz-actuality-51810 https://www.computertrends.cz/aktuality/emc-inovuje-reseni-data-lakes-pro-ukladani-podnikovych-dat/?utm_source=rss&utm_medium=text&utm_campaign=rss Mezi novinky patří nativní podpora systému HDFS (dostupnost této funkce se však teprve chystá), která má zákazníkům pomoci ukládat, chránit a spravovat velké objemy nestrukturovaných dat. Systém HDFS znamená, že zákazníci mohou analytické nástroje z platformy Hadoop přenést přímo do svého prostředí big data, což oproti opačnému postupu eliminuje čas a náklady spojené s přesouváním petabajtů dat. redakce@computertrends.cz (Computertrends: Pavel Houser) Mon, 14 Jul 2014 12:10:42 GMT www.computertrends.cz-actuality-51239 https://www.computertrends.cz/aktuality/analyzy-in-memory-na-platforme-hadoop-slibuje-sas/?utm_source=rss&utm_medium=text&utm_campaign=rss Interaktivní analytické řešení pro prostředí Hadoop připravuje podle svých slov SAS. Jde o open source platformu In-Memory Statistics for Hadoop, která výtrazně zjednoduší ukládání a správu velikých objemů dat. Podnikům mimo jiné umožní analyzovat data rychleji než pomocí konvenčních systémů. redakce@computertrends.cz (Computertrends: Pavel Louda) Thu, 05 Jun 2014 07:36:40 GMT www.computertrends.cz-actuality-51131 https://www.computertrends.cz/aktuality/microsoft-inovuje-nastroje-pro-praci-s-daty-vcetne-sql-serveru/?utm_source=rss&utm_medium=text&utm_campaign=rss SQL Server 2014 nabízí mimo jiné podporu zpracování transakcí a dat v paměti (in-memory) či snadné propojení s cloudovými řešeními Microsoftu – Azure, např. pro potřebu zálohování či obnovu databáze po havárii. redakce@computertrends.cz (Computertrends: Pavel Louda) Sat, 19 Apr 2014 04:36:54 GMT www.computertrends.cz-actuality-51007 https://www.computertrends.cz/aktuality/komplexni-sada-pro-big-data-za-predplatne-od-emc/?utm_source=rss&utm_medium=text&utm_campaign=rss Unifikovaná sada tak usnadňuje a zjednodušuje používání datové platformy Hadoop, relační databáze MPP a transakční databáze v paměti, a to za jednotnou cenu ve formě předplatného. To je k dispozici ve formě dvou- a tříletého úvazku za cenu závisející na počtu procesorových jader. redakce@computertrends.cz (Computertrends: Pavel Louda) Wed, 09 Apr 2014 07:09:30 GMT www.computertrends.cz-actuality-50979 https://www.computertrends.cz/aktuality/intel-vyrazne-investuje-do-big-dat/?utm_source=rss&utm_medium=text&utm_campaign=rss Součástí dohody je i kapitálový vstup Intelu do Cloudery, a to v řádu stovek milionů dolarů (spekuluje se o zhruba tři čtvrtě miliardy dolarů, přesné číslo strany neuvedly). Intel se tak podle svých slov stávánejvětším strategickým akcionářem Cloudery a získá také zastoupení v představenstvu společnosti. redakce@computertrends.cz (Computertrends: Pavel Louda) Wed, 02 Apr 2014 06:52:06 GMT www.computertrends.cz-actuality-50962 https://www.computertrends.cz/aktuality/zrejme-nejvykonnejsi-uloziste-optimalizovane-pro-hadoop-ma-sgi/?utm_source=rss&utm_medium=text&utm_campaign=rss InfiniteData Cluster, který využívá procesory Intel Xeon E5– 2600 v2 a až 12 4TB disků na uzel, je optimalizován pro Hadoop, a ve spojení s vysokorychlostním propojením poskytuje až 40 uzlů, respektive až 1,9PB na jeden rack, což je podle SGI nejméně dvojnásobná vyšší hustota na podlahovou plochu oproti jiným HPC řešením pro analýzy big dat. redakce@computertrends.cz (Computertrends: Pavel Louda) Fri, 22 Nov 2013 09:52:10 GMT www.computertrends.cz-actuality-50578 https://www.computertrends.cz/aktuality/po-softwarove-definovanych-sitich-prichazi-obdobna-uloziste/?utm_source=rss&utm_medium=text&utm_campaign=rss Platforma zajišťuje správu jak úložné infrastruktury (nazývané Control Plane, řídicí vrstva), tak i dat uložených v rámci této infrastruktury (nazývané Data Plane, datová vrstva). Umožňuje oddělit řídicí vrstvu od datové vrstvy a používat obě společně, nebo naopak pomocí řídicí vrstvy spravovat podkladové funkce úložných polí prostřednictvím zásadami řízené automatizace. redakce@computertrends.cz (Computertrends: Pavel Louda) Mon, 13 May 2013 05:37:22 GMT www.computertrends.cz-actuality-49890 https://www.computertrends.cz/aktuality/emc-vyrazne-zrychli-analyzu-big-dat-pomoci-reseni-pivotal-hd/?utm_source=rss&utm_medium=text&utm_campaign=rss Základem novinky je integrace databázového řešení Greenplum MPP (Massively Parallel Processing) s platformou Hadoop. Součástí produktu je technologie HAWQ, která podle dodavatele v porovnání s existujícími službami typu SQL nabízí více než 100násobné zvýšení výkonu na platformě Hadoop. redakce@computertrends.cz (Computertrends: Pavel Louda) Mon, 11 Mar 2013 11:26:40 GMT www.computertrends.cz-actuality-49595 https://www.computertrends.cz/aktuality/intel-nabidl-vlastni-podobu-platformy-hadoop-chce-akcelerovat-prijeti-big-dat/?utm_source=rss&utm_medium=text&utm_campaign=rss Oficiálně se projekt nazývá Intel Distribution for Apache Hadoop, má podobu open source a zahrnuje všechny klíčové části platformy Hadoop, které Intel doplnil o nástroje pro vývoj a ladění aplikací. Posledně jmenované prvky ale Intel vytvořil sám a tudíž nejsou součástí open source zdrojů. Intel bude podle svých slov pro svou distribuci nabízet podporu a údržbové služby. redakce@computertrends.cz (Computertrends: Pavel Louda) Fri, 01 Mar 2013 05:50:20 GMT www.computertrends.cz-actuality-49540 https://www.computertrends.cz/aktuality/analyzu-big-dat-vcetne-superrychleho-zalohovani-a-podpory-hadoopu-nabizi-novinka-od-emc/?utm_source=rss&utm_medium=text&utm_campaign=rss Desítky let staré architektury pro datovou správu a analýzy jsou pro škálování dnešních big dat od základu nevhodné. Kombinace narůstajícího množství dat, různorodost jejich typů a struktur a nutnost uplatnit k získání hodnoty složitou matematiku tradiční architektury zahlcuje. To podle EMC nutí firmy zavádět novou třídu analytických platforem. redakce@computertrends.cz (Computertrends: Pavel Louda) Mon, 11 Feb 2013 07:58:51 GMT www.computertrends.cz-actuality-49453 https://www.computertrends.cz/aktuality/hp-predstavilo-konvergovana-uloziste-pro-cloudy-i-big-data/?utm_source=rss&utm_medium=text&utm_campaign=rss Prvně jmenované řešení představuje podle výrobce jedinou platformu střední třídy se čtyřmi řadiči, nabízející ukládání dat třídy Tier 1. Mimo jiné podporuje blokové i souborové služby, osazena je jak klasickými rotačními disky, tak i SSD. redakce@computertrends.cz (Computertrends: Pavel Louda) Tue, 04 Dec 2012 10:52:59 GMT www.computertrends.cz-actuality-49171 https://www.computertrends.cz/aktuality/servery-specificky-urcene-pro-big-data-predstavilo-hp/?utm_source=rss&utm_medium=text&utm_campaign=rss Se zpracováním obrovských množství dat si podle HP poradí pouze řešení, která nabídnou obrovské datové úložiště, vysoký výpočetní výkon, nízkou spotřebu a úroveň generovaného tepla, a nízkou pořizovací cenu. redakce@computertrends.cz (Computertrends: Pavel Louda) Tue, 27 Nov 2012 09:06:47 GMT www.computertrends.cz-actuality-49141 https://www.computertrends.cz/aktuality/open-source-uloziste-predstavila-firma-red-hat/?utm_source=rss&utm_medium=text&utm_campaign=rss Produkt Storage Server 2.0 představuje škálovatelné pro správu nestrukturovaných dat ve firmách. Podle výrobce vůbec poprvé kombinuje inovace vytvářené komunitou se standardizovanými servery x86 napříč on-premise, cloudovým nebo hybridním prostředím. redakce@computertrends.cz (Computertrends: Pavel Louda) Fri, 29 Jun 2012 03:44:25 GMT www.computertrends.cz-actuality-45267 https://www.computertrends.cz/aktuality/sgi-posiluje-na-big-data-pomoci-procesoru-intel-xeon-e5/?utm_source=rss&utm_medium=text&utm_campaign=rss Díky silnému partnerství a více jak desetileté technologické spolupráci zařazuje společnost SGI nejnovější procesory Intel Xeon E5–4600 do své budoucí platformy se sdílenou pamětí s mnoha novými schopnostmi. Procesor Intel Xeon E5–2400 je nyní základním procesorem pro řešení SGI Hadoop Starter Kit a je k dispozici v produktové řadě SGI Rackable pro využití i v dalších aplikacích. „Dekádu trvající úzká spolupráce společností Intel a SGI vedla k mnoha vylepšením výkonu a energetické účinnosti řešení HPC a byla nasazena mnoha předními světovými výzkumnými zařízeními a podniky,“ uvedl Raj Hazra, IAG viceprezident a generální manažer skupiny Technical Computing Group ze společnosti Intel. „Společnost SGI využila nových procesorů Intel Xeon a byla schopna dodávat vysoce diferencované produkty s nebývalou rychlostí a škálovatelností aplikací od HPC až po Business Intelligence a datové sklady, včetně big data, simulací, analýz a dalších,“ dodal Hazra. Nastávající generace platformy se sdílenou pamětí – SGI UV – určená pro vysokorychlostní datově náročné výpočty, bude založena na procesorech Intel Xeon 4600-E5. Uživatelé budou moci využít významného zvýšení výkonu a zároveň získají zjednodušenou správu, konsolidaci aplikací a jednoduchost nasazení, to vše díky škálování v rámci jedné instance do rozsahu tisíce jader a mnoha terabajtům paměti ve srovnání s alternativami, které vyžadují stovky uzlů. Systém je zcela otevřený, využívá standardní procesory Intel x86, standardní Linux a ihned dostupné aplikace a middleware, to vše při zachování vysoké účinnosti a provozuschopnosti. Tento systém umožní uživatelům řešit nejnáročnější problémy díky rychlému a škálovatelnému výkonu s využitím téměř 64 terabajtů paměti a až 4096 jader v největším uceleném systému se sdílenou pamětí v jedné instanci. Systém poskytuje nejrychlejší cestu k výsledkům pro komplexní několika terabajtové problémy, včetně simulace a modelování, prevence podvodů, objevů nových léčiv, počasí a klimatického modelování, genomiky a výpočetní chemie a fyziky. Například sdružení COSMOS Stephena Hawkinga založené při univerzitě v Cambridgi si již vybralo tuto platformu k provádění kosmologického výzkum v Británii. „Spolupráce se společností SGI umožní vědcům ve Velké Británii prostřednictvím superpočítače sdružení COSMOS rozšířit své ambiciózní programy výzkumu v oboru kosmologie a exoplanet,“ sdělil profesor Paul Shellard, ředitel Centra pro teoretickou kosmologii na univerzitě v Cambridgi. „Neuvěřitelná flexibilita a škálovatelnost této generace vysoce výkonného výpočetního řešení se sdílenou pamětí od SGI urychluje naši práci s využitím velkých datových souborů a řeší komplexní simulace.“ „Big data jsou charakteristická nejen svým objemem, ale i rychlostí a rozmanitostí. Kromě toho mohou být big data buď ve strukturované nebo nestrukturované formě. Tato dynamika vede k celé řadě požadavků, které jsou kladeny na počítačový systém, zejména se jedná o velký výkon a komplexní analýzu,“ uvedl technický ředitel společnosti SGI Dr. Eng Lim Goh. „Naše dlouholeté partnerství s firmou Intel a začlenění robustnějších procesorů Intel Xeon E5, nám umožnily vyvinout další ucelenou platformu se sdílenou pamětí, která ještě více škáluje co do výpočtů, tak paměti i IO ve srovnání s předchozí generací. Výsledkem je systém, který se ideálně hodí pro řešení širokého spektra stávajících a nově vznikajících výzev v souvislosti s trendem big dat.“ SGI je jedním z předních dodavatelů velkých, vysoce výkonných clusterů Hadoop, a to jak pro velké komerční podniky, tak pro klíčové vládní instituce. Tyto systémy umožňují společnostem odhalit hodnotu jejich rozsáhlých dat, částečně strukturovaných i nestrukturovaných, která obvykle tvoří 80 % dat v každé organizaci. Základní sady SGI Hadoop Starter Kits obsahují veškeré požadované hardwarové i programové vybavení, vše připraveno k okamžitému nasazení, takže lze snadno potvrdit tuto fungující koncepci a rychle je nasadit do funkčního provozu. SGI Hadoop Starter Kits jsou nyní založeny na nových procesorech Intel Xeon E5–2400 a nabízejí 22% nárůst ceny a výkonu a 27% nárůst výkonu na watt ve srovnání s předchozí referenční implementací založenou na procesorech Intel Xeon řady 5600. Společně se softwarem od společnosti Cloudera a s vybranými analytickými partnery poskytují clustery SGI Hadoop nyní ještě větší výkon, zkracují dobu potřebnou k zahájení produkce a spolu se systémy se sdílenou pamětí od SGI a s úložnými systémy poskytuje end-to end řešení pro správu dat velkého rozsahu. redakce@computertrends.cz (Computertrends: Tadeáš Pelech) Tue, 22 May 2012 13:59:13 GMT www.computertrends.cz-actuality-45071 https://www.computertrends.cz/aktuality/databaze-emc-greenplum-nabizi-prime-propojeni-s-hadoopem/?utm_source=rss&utm_medium=text&utm_campaign=rss Uživatelé tak mohou podle výrobce spouštět rozsáhlé důležité analýzy snáze a rychleji, což zvyšuje produktivitu analýz i jejich obchodní hodnotu a zlepšuje schopnost kvalifikovaně se rozhodovat. redakce@computertrends.cz (Computertrends: Pavel Louda) Tue, 20 Mar 2012 11:20:16 GMT www.computertrends.cz-actuality-44751 https://www.computertrends.cz/aktuality/big-data-kombinovana-s-in-memory-raketove-urychli-zpracovani-informaci/?utm_source=rss&utm_medium=text&utm_campaign=rss Zákazníci budou mít v reálném čase k dispozici obrovské množství informací, které jsou obsaženy v big datách (zjednodušeně: data, se kterými není možné kvůli jejich velikosti pracovat se stávajícími nástroji v reálném čase). redakce@computertrends.cz (Computertrends: Pavel Louda) Mon, 12 Mar 2012 07:33:00 GMT www.computertrends.cz-actuality-44712 https://www.computertrends.cz/aktuality/optimalizovanou-applianci-pro-big-data-predstavil-oracle/?utm_source=rss&utm_medium=text&utm_campaign=rss Novinka podle výrobce představuje speciálně navržený hardware i software, který zahrnuje distribuci Cloudera včetně podpory pro technologii Apache Hadoop, komponentu Cloudera Manager a open source distribuci analytického systému R. redakce@computertrends.cz (Computertrends: Pavel Louda) Tue, 06 Mar 2012 10:34:21 GMT www.computertrends.cz-actuality-44679