Video: Eindexamen Nederlands - Tekstverklaren, stappenplan 2024
Er bestaan tal van methoden voor het analyseren van ongestructureerde gegevens voor uw big data-initiatief. Historisch gezien kwamen deze technieken voort uit technische gebieden zoals Natural Language Processing (NLP), kennisdetectie, datamining, het ophalen van informatie en statistieken. Tekstanalyse is het proces van het analyseren van ongestructureerde tekst, het extraheren van relevante informatie en het omzetten ervan in gestructureerde informatie die vervolgens op verschillende manieren kan worden gebruikt.
De analyse- en extractieprocessen profiteren van technieken die hun oorsprong vinden in computerlinguïstiek, statistiek en andere informatica-disciplines.
Soms kan een voorbeeld helpen om een complex onderwerp uit te leggen. Stel dat je voor de marketingafdeling werkt in een bedrijf met een draadloze telefoon. U hebt net twee nieuwe belplannen geïntroduceerd - Plan A en Plan B - en u krijgt niet de gewenste opname op Plan A. De ongestructureerde tekst uit de notities van het callcenter geeft u misschien enig inzicht in waarom dit is gebeurd.
De onderstreepte woorden bieden de informatie die u mogelijk nodig heeft om te begrijpen waarom Plan A niet snel wordt geaccepteerd. De entiteit Plan A wordt bijvoorbeeld overal in de callcenternotities weergegeven, wat aangeeft dat de rapporten het plan vermelden.
De termen roll-over-minuten, 4 GB-gegevens, dataplan, en duur zijn aanwijzingen dat er een probleem is met roll-over minuten, het dataplan en de prijs. Woorden als belachelijk en dom geven inzicht in het sentiment van de beller, wat in dit geval negatief is.
Het tekstanalyseproces maakt gebruik van verschillende algoritmen, zoals het begrijpen van de zinsstructuur, om de ongestructureerde tekst te analyseren en vervolgens informatie te extraheren en die informatie om te zetten in gestructureerde gegevens. De gestructureerde gegevens die zijn geëxtraheerd uit de ongestructureerde tekst worden geïllustreerd in Tabel 13-1.
| Identificatiecode | Entiteit | Probleem | Sentiment |
|---|---|---|---|
| Cust XYZ | Plan A | Roll-over minuten | Neutraal |
| Cust ABC | Plan A | Roll-over minuten | Negatief |
| XXXX | Plan A | Duur | Neutraal |
| XXXX | Plan A | Dataplan | Neutraal |
| Cust XYT > Plan A | Dataplan | Negatief | U kunt hiernaar kijken en zeggen: "Maar ik had dat kunnen achterhalen door naar de records van het callcenter te kijken. "Dit zijn echter slechts een klein deel van de informatie die door duizenden callcentermedewerkers wordt geregistreerd. Elke afzonderlijke agent kan onmogelijk een brede trend met betrekking tot het probleem waarnemen bij elk plan dat door het bedrijf wordt aangeboden. |
Agenten hebben niet de tijd of de vereiste om deze informatie te delen met alle andere callcentermedewerkers die mogelijk hetzelfde aantal oproepen ontvangen voor plan A. Nadat deze informatie echter is geaggregeerd en verwerkt met algoritmen voor tekstanalyse, is een trend kan voortkomen uit deze ongestructureerde gegevens. Dat is wat tekstanalyse zo krachtig maakt.
Zoeken gaat over het ophalen van een document op basis van wat eindgebruikers al weten waarnaar ze op zoek zijn. Tekstanalyse gaat over het ontdekken van informatie. Hoewel tekstanalyse verschilt van zoeken, kan het zoektechnieken verbeteren. Tekstanalyse in combinatie met zoeken kan bijvoorbeeld worden gebruikt om documenten beter te categoriseren of te classificeren en om samenvattingen of samenvattingen van documenten te produceren.
Er zijn vier technologieën: query's, datamining, zoeken en tekstanalyse. Aan de linkerzijde van de tabel bevinden zich query's en zoekopdrachten, die beide over ophalen gaan. Een eindgebruiker kan bijvoorbeeld een database opvragen om na te gaan hoeveel klanten de afgelopen maand zijn gestopt met het gebruik van de services van het bedrijf.
De query zou een enkel getal retourneren. Alleen door meer en verschillende vragen te stellen, krijgt de eindgebruiker de informatie die nodig is om te achterhalen waarom klanten vertrekken. Op dezelfde manier kan met trefwoord zoeken de eindgebruiker de documenten vinden die de namen van de concurrenten van een bedrijf bevatten. De zoekopdracht zou een groep documenten retourneren. Alleen door het lezen van de documenten zou de eindgebruiker met relevante antwoorden komen.
Ophalen
| Insight | Structured | |
|---|---|---|
| Query: geeft gegevens | Data mining: Insight van gestructureerde gegevens | Unstructured |
| Search: Returns documents | Text analytics: Insight from text < De technologieën aan de linkerkant leveren informatie op en vereisen menselijke interactie om die informatie te synthetiseren en te analyseren. De technologieën rechts - datamining en tekstanalyse - leveren veel sneller inzicht. Hopelijk wordt de waarde van tekstanalyse voor uw organisatie duidelijk. |
