Today in dystopian news: Amazon, the book selling department, controlling about 40% of the US book market, collects reading habbits from their sales and Kindle. By now the corporation knows enough about it’s customers it could be generating best selling books. Spookey. And potentially game changing, when machines replace creative professions. Amazon has the ability […]
Tag Archives: big data
Building an ETL Pipeline in Python
Python 🐍: link.medium.com/SwkKHyKrzR
The terrifying, hidden reality of Ridiculously Complicated Algorithms
Leseempfehlung: Ein Journalist spricht mit einem anonymen Big Data Engineer/Analyst über die Komplexität von Algorithmen. Wie erschreckend die Abhängigkeit von undurchschaubaren Komponenten geworden ist gegenüber dem Einfluss den Maschinen damit auf unser Leben haben. Man kann das auch als Laie verstehen, wie ich meine, selbst mein Verständnis von Big Data reicht nur so weit als […]
Economics Has a Math Problem
The field begins to look like others that rely on data. This is a discussion I had more than a decade back with economy students, as a student of computer science. The argument was much the same and nothing much has changed in the meantime. The difference is more data is available today and can […]
Not so big data.
Chris Stucchio hat einen interessanten Punkt bzgl. Big Data. Nämlich, dass Big Data heißt gar nicht Big ist. Nur weil Excel einen Datensatz nicht öffnen kann, heisst das nicht automatisch, dass Big Data Tools – in seinem Aufsatz Hadoop – notwendig sind. Gigabyteweise Daten lassen sich auch anders verarbeiten. Moderne Hardware hat nicht selten mehrere GB an Hauptspeicher. Die […]
Data and Goliath
Data and Goliath: The Hidden Battles to Collect Your Data and Control Your World Bruce Schneier wrote a book about Big Data, mass surveilance and the Internet of Things. Schneier talks about how this effects society and what to do about the increasing datarization of everything we’re doing.
Why monitoring is hard
(and why your vendor will only sell you tools, not solutions) Intro Monitoring infrastructure in a meaningful way is important to any IT operations, yet it is hard to realize. Many vendors adress this problem and promise a silver bullet.
Big Data & das Ende der Privatsphäre?
Big Data ist ein Begriff der in der Techwelt erst einmal einen Haufen Daten beschreibt, der mit herkömmlichen Datenbanken nicht mehr ohne weiteres in den Griff zu bekommen ist. In einem größeren Zusammenhang hat Big Data aber noch ganz andere Konsequenzen. Simone Janson setzt das alles in Ihrem Blog in Zusammenhang. Studie zeigt, wie Unternehmen […]
Atmosphere On Tour
R zur Visualisierung von Social Media Analysen
R ist ja das Open-Source Statistik-Paket schlechthin. Auch zur graphischen Aufbereitung komplexer Zusammenhänge von Daten ist die Software bestens geeignet. “Realtime” und “Web” sind allerdings zwei Attribute, die in der Regel nicht mit R genannt werden. Der Twitter-Monitor, der hier als Beispiel für BigData Analyse angeführt wird, tut es trotzdem: eoda, R und Datenanalyse » […]