Mohs’ law and big data (Hadoop is hard)

rsts11 - Robert Novak on system administration

I’ve spent more time than usual the past two weeks talking with people, and listening to people, about Hadoop. I’ve been administering Hadoop clusters for (part of) a living for about 4-5 years now, and I’ve gotten pretty good at answering questions people don’t have, or want, answers for.

In the past week or so I’ve heard one vendor advocate that Hadoop gives you a free analytics environment with no need for expensive developers since it’s free software, and another vendor advocated that you can just virtualize Hadoop by putting lots of  datanodes on a single host and save lots of money. Easy peasy, right?

no-just-no

 I’m proposing we consider Mohs’ Law in this situation.

No, I’m not misspelling Moore’s Law, which tells us that compute power/efficiency will double every 24 months. I’m suggesting a law that’s more of a diamond in the rough, if you don’t mind.

Hadoop…

View original post 674 more words

About kwalitisme

Een eigenwijze, dwarse, innovatieve denker. Een echte Child of the sixties, anti autoritair, liberaal, republikein maar verantwoordelijk. En is ervan overtuigd dat het teruggeven van eigen verantwoordelijkheid aan burgers veel zal verbeteren. Business Innovator. Ambassadeur van 'Use Your Own'. Ruim 30 jaar IT ervaring en nog steeds verbaasd over hoe slecht IT gebruikt wordt. IT zou vanuit de gebruikers moeten komen, niet opgelegd aan gebruikers. Maar niet alleen geïnteresseerd in IT. Ook financieel economisch groot voorstander van andere montaire systemen, niet gebaseerd op geld als handelsmiddel, maar gebaseerd op waarde. Kwaliteit is zijn passie: organisatie die gedreven worden door het leveren van echte kwaliteit van hun producte of diensten, zijn de organisaties die het verschil gaan maken en uiteindelijk overleven. Daarom nu Kwalitist, en een onderneming genaamd 'Kwalitsme': het opnieuw inhoud geven aan kwalititeit.

Leave a Reply

Fill in your details below or click an icon to log in:

WordPress.com Logo

You are commenting using your WordPress.com account. Log Out /  Change )

Google photo

You are commenting using your Google account. Log Out /  Change )

Twitter picture

You are commenting using your Twitter account. Log Out /  Change )

Facebook photo

You are commenting using your Facebook account. Log Out /  Change )

Connecting to %s