Wat betekent big data?
De betekenis van grote en uiteenlopende datasets
Big data betekent dat een hoeveelheid of combinatie van gegevens aanvullende technologie nodig heeft om technisch te worden opgeslagen, verwerkt en gebruikt. Het gaat niet alleen om veel data, maar ook om de snelheid waarmee gegevens beschikbaar komen en de verschillende vormen waarin ze worden aangeleverd. Denk aan databases, documenten, afbeeldingen, logbestanden, sensordata en informatie uit externe systemen.
Big data eenvoudig uitgelegd
Meer dan alleen een grote hoeveelheid gegevens
Letterlijk vertaald betekent big data ‘grote gegevens’. Er bestaat echter geen vaste omvang vanaf wanneer een dataset big data wordt genoemd. De term wordt vooral gebruikt wanneer traditionele bestanden, spreadsheets of afzonderlijke databases niet meer voldoende zijn om de beschikbare gegevens praktisch te verwerken. De technische combinatie van hoeveelheid, snelheid en variatie maakt data ‘big’.
Wanneer spreken we van big data?
De omvang, snelheid en complexiteit van gegevens
Een dataset hoeft niet uit miljarden records te bestaan om als big data te worden beschouwd. Wat groot of complex is, hangt samen met de softwareomgeving, beschikbare infrastructuur en gewenste verwerking. Data die binnen de ene toepassing eenvoudig kan worden verwerkt, kan binnen een andere toepassing aanvullende technische voorzieningen vragen.
Big data kan afkomstig zijn uit één bron, maar bestaat vaak uit een combinatie van systemen. Voorbeelden zijn CRM- en ERP-software, online platformen, mobiele applicaties, apparaten, sensoren, transacties, bestanden en externe databronnen.
De gegevens kunnen gestructureerd zijn, zoals klant-, order- en voorraadgegevens met een vaste indeling. Semigestructureerde gegevens, zoals JSON-bestanden en bepaalde logbestanden, bevatten wel een herkenbare opbouw maar volgen niet altijd een vast databaseschema. Ongestructureerde data bestaat bijvoorbeeld uit documenten, vrije tekst, afbeeldingen, audio en video.
Ook de snelheid waarmee nieuwe informatie binnenkomt speelt een rol. Sommige gegevens worden dagelijks of wekelijks verwerkt, terwijl andere toepassingen vrijwel direct nieuwe transacties, locaties, gebeurtenissen of sensormetingen moeten ontvangen.
Big data betekent daarom vooral dat gegevens niet meer als één eenvoudig bestand kunnen worden behandeld. Er is software nodig om verschillende bronnen te verbinden, data te controleren en de informatie op de gewenste manier beschikbaar te maken.
Wat betekent big data voor software?
Gegevens opslaan, verwerken en toepassen
Een big-datatoepassing bestaat meestal uit meerdere technische onderdelen. Gegevens worden eerst ingelezen vanuit databases, bestanden, API’s, apparaten of externe systemen. Vervolgens kan de software de data controleren, omzetten, combineren en opslaan.
Voor de opslag kunnen onder meer relationele databases, documentdatabases, datawarehouses, datalakes en objectopslag worden gebruikt. Welke techniek passend is, hangt samen met het formaat van de data en de manier waarop de software de gegevens moet verwerken.
Daarna kunnen verwerkingsregels, zoekindexen, berekeningen en modellen worden toegevoegd. De resultaten kunnen beschikbaar worden gemaakt via dashboards, rapportages, signaleringen, kaarten, zoekfuncties, portalen of koppelingen met andere applicaties.
Big data kan ook worden gecombineerd met kunstmatige intelligentie en machine learning. Modellen kunnen beschikbare gegevens gebruiken voor classificatie, patroonherkenning, aanbevelingen of voorspellingen. Hiervoor wordt de data technisch voorbereid en verbonden met de gewenste softwarefunctionaliteit.
Bij gevoelige of persoonsgebonden informatie kunnen daarnaast technische voorzieningen worden opgenomen voor rollen en rechten, logging, versleuteling, pseudonimisering en gegevensscheiding.
APPelit ontwikkelt de benodigde databases, datastromen, koppelingen, backendfunctionaliteiten en gebruikersschermen als onderdelen van een maatwerktoepassing. Zo krijgt het begrip big data een concrete technische invulling binnen software.
Big data technisch toepassen
Van beschikbare gegevens naar maatwerksoftware
Wilt u gegevens uit meerdere bronnen combineren, verwerken of presenteren binnen één applicatie? APPelit ontwikkelt maatwerksoftware voor dashboards, dataplatformen, portalen, zoekfuncties, AI-toepassingen en andere datagedreven functionaliteiten.
De beschikbare databronnen en gewenste softwarefuncties vormen het vertrekpunt voor de technische uitwerking. Ook hosting, monitoring, onderhoud en verdere ontwikkeling kunnen onderdeel zijn van de dienstverlening.
Tijdens een vrijblijvend gesprek kunt u uw datatoepassing toelichten. Wij vertellen u vervolgens graag welke technische werkzaamheden APPelit binnen uw softwareproject kan verzorgen.
Ervaar het gemak van onze service!
Wilt u dat wij contact opnemen? Vul het formulier hieronder in en we bellen u terug.
U kunt ook meer informatie achterlaten via onze contactpagina of het offerteformulier
Ervaar het gemak van onze service!
Wilt u dat wij contact opnemen? Vul het formulier hieronder in en we bellen u terug.
U kunt ook meer informatie achterlaten via onze contactpagina of het offerteformulier
Wij werken onder andere met
