Der Geek aus Ägypten, der die Welt der Big Data erobert
HeimHeim > Blog > Der Geek aus Ägypten, der die Welt der Big Data erobert

Der Geek aus Ägypten, der die Welt der Big Data erobert

Aug 13, 2023

Technikfreaks dienstags

Dienstag, 25. Juli 2017,

16 Min. gelesen

Amr Awadallah wäre heute Professor, wenn er nicht auf die Welt der Startups gestoßen wäre. Im Mittelpunkt der Techie Tuesdays dieser Woche steht Amr, Mitbegründer von Cloudera, der Plattform für Datenmanagement und -analyse, die er auf Apache Hadoop und anderen Open-Source-Technologien aufgebaut hat. Das Unternehmen startete Anfang des Jahres einen Börsengang und hat mittlerweile einen Wert von fast 2,5 Milliarden US-Dollar.

Während eines kürzlichen Gesprächs mit Amr Awadallah, Gründer und CTO von Cloudera, erfuhr ich nicht nur von seiner faszinierenden Reise, sondern auch von einem Aspekt des ägyptischen Lebens, den ich bis dahin für Indien typisch hielt. Als ich Amr zuhörte, wie er über seine frühen Jahre sprach, wurde mir klar, dass indische Eltern nicht die einzigen sind, die entscheiden oder ihren Kindern eine berufliche Laufbahn aufzwingen. Das machen auch ägyptische Eltern. Ich habe auch erfahren, dass Yahoo! eine Produktabteilung namens Yahoo Shopping hat und dass Mendel Rosenblum, einer der Mitbegründer von VMware, Professor für Informatik an der Stanford University ist.

Amr wäre unabhängig von seinem beruflichen Werdegang ein Computer-Enthusiast geblieben. Wenn er kein Technikfreak und CTO gewesen wäre, wäre er Professor geworden, ein Karriereweg, den sein Vater für ihn gewählt hatte.

Die Dinge liefen auf dem richtigen Weg, bis der Startup-Bug Amr heimsuchte. Er startete und stieg noch während seines Studiums aus. Nach seinem Doktortitel kehrte er erneut in die Startup-Welt zurück, dieses Mal mit mehr Selbstvertrauen und Wissen. Amr gründete Cloudera 2008 zusammen mit drei weiteren Personen. Anfang des Jahres startete das Unternehmen einen Börsengang und hat derzeit einen Wert von fast 2,5 Milliarden US-Dollar. Cloudera ist eine der weltweit größten Plattformen für Datenmanagement und -analyse.

Die Techie Tuesdays dieser Woche beschäftigen sich mit Amrs Reise von Kairo nach Kalifornien.

Verwandte Lektüre -Von UP in die USA: Die Reise von Abhinav Asthana und seine Affäre mit APIs

Amr wurde 1970 in Kairo, Ägypten, geboren. Kurz nach seiner Geburt zog sein Vater nach Southampton in Großbritannien, um dort in Buchhaltung zu promovieren. Amr und seine Mutter kamen wenig später zu ihm und verbrachten dort fünf Jahre. Nach Abschluss seiner Doktorarbeit kehrte sein Vater nach Hause zurück und wurde Professor an der Universität Kairo. Amr erinnert sich, dass sein Vater ihn schon früh dazu gedrängt hatte, Universitätsprofessor zu werden. Es wurde schnell auch Amrs Ziel.

Amr schnitt in der Schule sehr gut ab und schloss sein Studium an der Fakultät für Ingenieurwissenschaften der Universität Kairo als Klassenbester ab. Eine Lehrtätigkeit wurde als logische Weiterentwicklung für Studierende angesehen, die sich im Grundstudium hervorgetan haben. Amr schrieb sich für einen Master in Computertechnik ein.

Er studierte Animation und arbeitete daran, Charaktere zu erschaffen, die wie Menschen gingen – im Gegensatz dazu, dass Animatoren sie Bild für Bild zeichnen mussten. Er erklärt,

Amr liebte Videospiele seit seiner Kindheit und sah sogar eine Zukunft in der Animation. Er wollte die Erstellung von Charakteren in den Spielen vereinfachen und ihnen möglichst natürliche und reale Bewegungen verleihen.

Nach seinem Abschluss bewarb er sich an vielen Universitäten in den USA und wurde neben mehreren anderen auch in Stanford angenommen.

Die ersten Monate in Stanford waren für Amr hart. Er war mit seiner Frau und ihrem kleinen Baby in die USA gezogen und kannte dort nicht viele Menschen. Auch Amr, der es gewohnt war, in seiner Klasse in Kairo der Beste zu sein, war im Vergleich zu anderen Schülern seiner Klasse in Stanford durchschnittlich.

Ursprünglich hatte Amr vor, in Computernetzwerken zu promovieren, und er veröffentlichte sogar einige Artikel zu diesem Thema. Während seiner Zeit in Stanford kam er schon sehr früh mit dem Unternehmertum in Berührung. Er erinnert sich,

All dies machte den Start in den Augen der Studierenden relativ einfacher. 1999 schloss sich Amr einem seiner Freunde, Thai Tran, an, der einen Einkaufsvergleichsdienst für Bücher namens BookSmart (später umbenannt in VivaSmart) aufbaute. Da sich die Internetblase damals auf dem Höhepunkt befand, konnte Amr problemlos etwa 500.000 US-Dollar für sein Unternehmen aufbringen.

VivaSmart war eine Preisvergleichsmaschine, die das gesamte Web durchsuchen und alle Arten von Informationen zu einem Produkt (Spezifikationen, Bilder usw.) sowie Preise von verschiedenen Websites zusammenfassen konnte. Amr fügt hinzu: „Wir haben mit Büchern begonnen, weil die Schüler bei Büchern preisbewusst sind.“

VivaSmart nutzte Oracle für die Datenbank, um viele Informationen zu sammeln, und Perl-Skripte und -Programme, um die Agenten zu erstellen, die das Web durchforsten, um Informationen aufzuspüren. Das Unternehmen verfügte über ein Rechenzentrum vor Ort.

Lesen Sie auch -Treffen Sie Ajay Shrivastava – den Tech-General hinter Kultur und Technologie bei Oyo und Knowlarity

Im Jahr 2000 wurde klar, dass die Internetblase platzen würde, und viele Unternehmen begannen zu schließen. Da VivaSmart ein gutes Produkt, aber weniger Kunden hatte, beschlossen Amr und sein Mitgründer, das Unternehmen zu verkaufen. Sie wandten sich an einige ihrer Kunden und einer von ihnen machte ein gutes Angebot. Doch an dem Tag, an dem der Deal unterzeichnet werden sollte, wurde er abgesagt. Amr sagt: „Wir waren am Boden zerstört. Aber wir gingen zurück und schauten uns andere Unternehmen an, an die wir uns gewandt hatten.“

Schließlich hat Yahoo! stimmte im Juni 2000 der Übernahme von VivaSmart für 8,9 Millionen US-Dollar zu, und Amr und sein Mitbegründer schlossen sich Yahoo! an.

Während er sich auf VivaSmart konzentrierte, hörte Amr auf, an seiner Doktorarbeit zu arbeiten, und so endete 2001 seine zweijährige Beurlaubung. Er wollte unbedingt zurückgehen und seine Doktorarbeit abschließen und erzählte Yahoo! das gleiche. Aber das Unternehmen, das wollte, dass er weiterhin für sie arbeitet, erklärte sich bereit, Amrs Studiengebühr zu zahlen und gab ihm genügend Zeit, um an seiner Doktorarbeit zu arbeiten. Professor Mendel Rosenblum, einer der Gründer von VMware, erklärte sich bereit, Amr zu leiten. Amrs These war vMatrix, eine abwärtskompatible Lösung zur Verbesserung der Interaktivität, Skalierbarkeit und Zuverlässigkeit von Internetanwendungen. Er addiert,

In seinen ersten vier Jahren bei Yahoo!, zwischen 2000 und 2004, konzentrierte sich Amr auf den Preisvergleichsdienst, der nach der Übernahme von VivaSmart entstand. VivaSmart wurde zum Backend für Yahoo Shopping und Amr half bei der Integration der Technologie und dem Hinzufügen neuer Funktionen.

Im Jahr 2004 wechselte Amr zu einer neuen Rolle: der Messung der Leistung von Business Intelligence und Datenanalysen für verschiedene Yahoo-Produkte und deren Optimierung. Er hält diese Erfahrung für grundlegend für die Idee, die sich später in Cloudera verwandelte.

Sie können auch mögen ...Die unerzählte Geschichte von Orkut Büyükkökten – dem Mann, der vor Mark Zuckerberg das größte soziale Netzwerk der Welt aufgebaut hat

Bei Yahoo! hatte Amr eine Business-Intelligence-Plattform mit Oracle-Technologie für Data Warehousing und Datensysteme aufgebaut, in der alle Daten aggregiert wurden. Er nutzte IBM DataStage für die Datenerfassung und MicroStrategy für Geschäftsberichte und Dashboards. Dabei stieß er auf die folgenden Probleme in seiner Datenpipeline:

Damals gründete eine Gruppe bei Yahoo! arbeitete an Hadoop für Yahoo! Suchen. Amr erinnert sich:

Amr traf das daran arbeitende Team und beschrieb einige seiner BI-Probleme und datenwissenschaftlichen Herausforderungen. Er versuchte es mit Hadoop und es löste alle vier Probleme. Er fügt hinzu: „Die Datenverarbeitung von acht Stunden wurde auf fünf Minuten verkürzt. Auch die Kosten pro Gigabyte sanken um das Zehnfache. Es war viel flexibler, die Schemata zu ändern, und ich konnte neben SQL viele andere Möglichkeiten zur Datenanalyse nutzen.“

Amr schloss 2007 seine Doktorarbeit ab und verließ Yahoo! im Jahr 2008. Damals hatte er herausgefunden, dass Hadoop groß werden würde. Er kam als Entrepreneur-in-Residence (EIR) zu Accel Partners und bekam die Chance, an der Ideenphase von Startups zu arbeiten, die dem Unternehmen vorgestellt wurden. Bald entschloss er sich, an Hadoop-Startups zu arbeiten, da er das Problem und die Lösung sehr gut verstand.

Er traf seinen ersten Mitbegründer, Jeff Hammerbacher, der damals ebenfalls EIR bei Accel war. Jeff gründete das Data-Science-Team bei Facebook. Tatsächlich hatte er zusammen mit DJ Patil den Begriff „Data Science“ geprägt. Auch Jeff hatte die Leistungsfähigkeit von Hadoop in Bezug auf Skalierbarkeit, Agilität und Kosteneffizienz erlebt. Nur ein paar Wochen später hörten Amr und Jeff von zwei Leuten, die das Gleiche taten wie sie, und beschlossen, sie auf Anraten des Investors zu treffen, dem sie ihren Pitch vorschlugen. Das Duo traf Mike Olson, der in den ersten fünf Jahren CEO von Cloudera wurde, und Christophe Bisciglia. Die vier brachten komplementäre Fähigkeiten mit und gründeten Cloudera im Oktober 2008 offiziell.

Verwandte Lektüre:Lernen Sie Kiran Bhat kennen – den Mann, der Hulk und Tarkin konstruiert hat und den Science-Tech-Oscar 2017 gewann

Amr glaubt, dass jedes Startup drei Phasen durchläuft:

Cloudera hat kürzlich Altus auf den Markt gebracht, die Platform-as-a-Service-Version ihres Produkts. Cloudera zählt Airtel zu seinen größten Kunden weltweit. Das Unternehmen hat auch einige andere Kunden in der indischen Regierung.

Cloudera begann mit Hadoop und konzentrierte sich auf Stapelverarbeitung und -speicherung unter Verwendung von MapReduce Service und HDFS (Hadoop Distributed File System). Derzeit hat das Unternehmen fast 30 verschiedene Projekte. Amr sagt:

Er fügt hinzu: „Um dieses Ergebnis zu erreichen, benötigen wir eine Plattform, die hinsichtlich der Nutzung jeder Art von Daten flexibel ist, aber den Wert der Daten auch auf unterschiedliche Weise extrahieren kann.“

Zu den Angeboten von Cloudera gehören:

Amr weist darauf hin, dass die Herausforderungen für ein Startup zwar zahlreich sind, sich jedoch je nach der Phase, in der es sich befindet, unterscheiden. Während der Phase der Anpassung an den Produktmarkt bestand die größte Herausforderung für Cloudera darin, die Merkmale und Funktionen von Open-Source-Projekten herauszufinden, die sie in das Projekt einbeziehen sollten Hadoop-Verteilung, um den Bedürfnissen und Erwartungen eines möglichst breiten Kundenspektrums gerecht zu werden.

Als Cloudera begann, viele Kunden zu gewinnen, stand das Unternehmen vor der Herausforderung, diesen Kunden Support zu bieten. Mittlerweile gibt es Bots im Kundensupport, die fast 20 Prozent der Arbeitslast der Supportorganisation bewältigen. Cloudera ist der Meinung, dass es viel skalierbarer ist, als wenn Menschen die Arbeitslast bewältigen, und plant, weiterhin in Bots zu investieren.

Amr und das Cloudera-Team glauben, dass durch das Sammeln ausreichender Daten unterschiedlicher Art – nicht nur Strukturdaten, sondern auch semistrukturelle Daten von Sensoren, Mobilgeräten sowie völlig unstrukturierten Daten aus sozialen Medien, E-Mails und Dokumenten – darüber, wie Menschen sich unterscheiden Welche Arten von Entscheidungen es gibt, man kann so viel mehr zu diesem Thema lernen. Dies ist seit den Anfängen Teil der DNA von Cloudera.

Amr glaubt, dass sich die menschliche Zivilisation jetzt in der sechsten Welle der Automatisierung befindet:

Er behauptet, dass der Stack von Cloudera dem von Amazon und anderen überlegen sei. Er sagt,

Darüber hinaus behauptet Amr, dass Cloudera über den Bot/die KI verfügt, der ihre Kundencluster unterstützt, ihre Daten analysiert und ihnen mitteilt, welche Änderungen vorgenommen werden müssen, damit der Cluster mit hoher Sicherheit und Kapazität funktioniert.

Lesen Sie auch -Die unerzählte Geschichte von Alan Cooper, dem Vater von Visual Basic

Was die Mitarbeiter von Cloudera angeht, sucht Amr nach produktiven, intelligenten Leuten mit guter Arbeitsmoral, die zur Unternehmenskultur passen. Er sagt,

Cloudera folgt einer konsensorientierten Entscheidungsfindung. Amr glaubt, dass Debatten, auch wenn sie gelegentlich zu Verzögerungen führen, zu klügeren Entscheidungen führen.

Viele der individuellen Werte von Amr kommen auch bei Cloudera zum Ausdruck:

Eines der größten Bedauern in Amrs Leben ist die verpasste Gelegenheit, die Entstehung eines der wichtigsten Konkurrenten von Cloudera zu verhindern. Er sagt: „HortonWorks kam von Yahoo! und ich wusste von diesem Team. In gewisser Weise hätten wir eingreifen können, um das Team zu übernehmen oder zumindest einige Leute aus dem Team einzustellen und so die Abspaltung zu verhindern.“ HortonWorks wird derzeit mit mehr als 800 Millionen US-Dollar bewertet.

Nach Angaben der International Data Corporation wird die Automatisierung von Entscheidungen bis 2020 ein 200-Milliarden-Dollar-Markt sein. Amr glaubt, dass Cloudera in den nächsten 10 bis 15 Jahren genügend Chancen hat, zu einem 30- bis 100-Milliarden-Dollar-Markt zu werden. Mit Cloudera möchte Amr das Oracle bzw. IBM der Zukunft schaffen. Er möchte diese Welle der Automatisierung von Entscheidungen ermöglichen, die Finanzen, Versicherungen, Governance, Smart Cities und die Art und Weise, wie wir alle leben, verändern wird.

Sie können sich mit Amr verbindenTwitter|LinkedIn

cloudera

Jeff Hammerbacher

Universität Kairo

Amr Awadallah

Christophe Bisciglia

VivaSmart

Altus

1

KI-Gen

Technischer Guruji: Gauravs Reise zum reichsten Tech-Influencer Indiens

2

KI-Gen

Inderin Sampriti Bhattacharyya: Schöpferin von Amerikas erstem fliegenden Elektroboot

3

KI-Gen

Der Mensch verwandelt KI-Leidenschaft in wenigen Wochen in Erfolg im Wert von 1,4 Crore Rupien

4

KI-Gen

Wie die Weisheit des Aristoteles die moderne Produktivität und Emotionen antreibt

5

Interview

Leben nach CaratLane: Mithun Sacheti möchte beim Aufbau von Unternehmen helfen

Verwandte Lektüre -Von UP in die USA: Die Reise von Abhinav Asthana und seine Affäre mit APIsDas ägyptische Geek-KindStanford und StartupLesen Sie auch -Treffen Sie Ajay Shrivastava – den Tech-General hinter Kultur und Technologie bei Oyo und KnowlarityDie Blase platzteZurück zum CollegeYahoo!Sie können auch mögen ...Die unerzählte Geschichte von Orkut Büyükkökten – dem Mann, der vor Mark Zuckerberg das größte soziale Netzwerk der Welt aufgebaut hatDie Entstehung von ClouderaGeschwindigkeit, mit der er die Daten verarbeiten konnte:Das Oracle-System war sehr teuerfeste Datenstrukturen, die sehr schwer zu ändern sindProbleme passten nicht gut zu SQLVerwandte Lektüre:Lernen Sie Kiran Bhat kennen – den Mann, der Hulk und Tarkin konstruiert hat und den Science-Tech-Oscar 2017 gewannCloudera in den letzten neun JahrenEntdeckungsphase,Produkt-Markt-Fit-Phase,Skalierungsphase:Tech-Stack bei ClouderaHerausforderungenDie sechste Welle der AutomatisierungAutomatisierung des WissenstransfersAutomatisierung des Anbaus/der Herstellung von LebensmittelnAutomatisierung der Entdeckung,die Produktion automatisierenAutomatisierung des ProzessesAutomatisierung von EntscheidungenLesen Sie auch -Die unerzählte Geschichte von Alan Cooper, dem Vater von Visual BasicVon Team, Entscheidungen und WertenVergangenheit und ZukunftSie können sich mit Amr verbindenTwitter|LinkedIn