Twitter heeft een tool waarmee het zelf big data analyseert om zo onder andere bots en spam te bestrijden opensource gemaakt. "AnomalyDetection", zoals de tool heet, zoekt naar onregelmatigheden in big data. Het kan dan gaan om pieken in het aantal tweets die door bepaalde sportwedstrijden, evenementen of gebeurtenissen worden veroorzaakt, of het werk van spammers zijn.
"De tool helpt bij het vinden van bots of spam, alsmede onregelmatigheden in systeemgegevens na de uitrol van nieuwe software", zegt software-ingenieur Arun Kejariwal. Hij merkt op dat Twitter bewust heeft gekozen om de tool opensource te maken, zodat de gemeenschap het programma verder kan ontwikkelen. Onlangs maakte Twitter ook al een andere tool genaamd BreakoutDetection opensource.
Deze posting is gelocked. Reageren is niet meer mogelijk.