Natural Language Processing (NLP)

Vad är Natural Language Processing (NLP)?

Natural Language Processing (NLP) är ett område av artificiell intelligens (AI) som gör det möjligt för datorer att analysera och förstå mänskligt språk, både skrivna och talade. Det formulerades för att bygga mjukvara som genererar och förstår naturliga språk så att en användare kan ha naturliga konversationer med en dator istället för genom programmering eller konstgjorda språk som Java eller C.

Förstå Natural Language Processing (NLP)

Natural Language Processing (NLP) är ett steg i ett större uppdrag för tekniksektorn – nämligen att använda artificiell intelligens (AI) för att förenkla hur världen fungerar. Den digitala världen har visat sig vara en game-changer för många företag eftersom en alltmer teknikkunnig befolkning hittar nya sätt att interagera online med varandra och med företag.

Sociala medier har omdefinierat innebörden av gemenskap; kryptovaluta har ändrat den digitala betalningsnormen; e-handel har skapat en ny innebörd av ordet bekvämlighet, och molnlagring har introducerat en annan nivå av datalagring för massorna.

Genom AI öppnar fält som maskininlärning och djupinlärning ögonen för en värld av alla möjligheter. Maskininlärning används alltmer i dataanalys för att förstå big data. Den används också för att programmera chatbots för att simulera mänskliga samtal med kunder. Men dessa framåtgående tillämpningar av maskininlärning skulle inte vara möjliga utan improvisationen av Natural Language Processing (NLP).

Stadier av naturlig språkbehandling (NLP)

NLP kombinerar AI med beräkningslingvistik och datavetenskap för att bearbeta mänskliga eller naturliga språk och tal. Processen kan delas upp i tre delar. Den första uppgiften för NLP är att förstå det naturliga språket som datorn tar emot. Datorn använder en inbyggd statistisk modell för att utföra en taligenkänningsrutin som konverterar det naturliga språket till ett programmeringsspråk. Det gör det genom att dela upp ett nyligen hört tal i små enheter och sedan jämföra dessa enheter med tidigare enheter från ett tidigare tal.

Utdata eller resultat i textformat avgör statistiskt de ord och meningar som med största sannolikhet sas. Denna första uppgift kallas tal-till-text-processen.

Nästa uppgift kallas ordspråksmärkning (POS) eller disambiguation av ordkategorier. Denna process identifierar elementärt ord i sina grammatiska former som substantiv, verb, adjektiv, förfluten tid, etc. med hjälp av en uppsättning lexikonregler kodade i datorn. Efter dessa två processer förstår datorn förmodligen nu innebörden av talet som hölls.

Det tredje steget som tas av en NLP är text-till-tal-konvertering. I detta skede konverteras datorprogrammeringsspråket till ett hörbart eller textformat för användaren. En chatbot för finansnyheter, till exempel, som får en fråga som "Hur mår Google idag?" kommer med största sannolikhet att söka igenom finanssajter online efter Google-aktier och kan välja att endast välja information som pris och volym som svar.

Särskilda överväganden

NLP försöker göra datorer intelligenta genom att få människor att tro att de interagerar med en annan människa. Turing-testet,. som föreslogs av Alan Turing 1950, säger att en dator kan vara fullt intelligent om den kan tänka och föra en konversation som en människa utan att människan vet att de faktiskt samtalar med en maskin.

En dator 2014 klarade testet på ett övertygande sätt - en chatbot med en 13-årig pojkes persona. Detta är inte att säga att en intelligent maskin är omöjlig att bygga, men den beskriver svårigheterna med att få en dator att tänka eller prata som en människa. Eftersom ord kan användas i olika sammanhang, och maskiner inte har den verkliga erfarenhet som människor har för att förmedla och beskriva enheter i ord, kan det ta en liten stund längre innan världen helt kan göra sig av med datorprogrammeringsspråk.

Höjdpunkter

• Natural Language Processing (NLP) använder datoralgoritmer och artificiell intelligens för att göra det möjligt för datorer att känna igen och svara på mänsklig kommunikation.

– Text-till-tal-appar, som nu finns på de flesta iOS- och Android-plattformar, tillsammans med smarta högtalare som Amazon Echo (Alexa) eller Google Home, har blivit allestädes närvarande exempel på NLP under de senaste åren.

• Även om det finns flera NLP-metoder, går de vanligtvis ut på att dela upp tal eller text i diskreta underenheter och sedan jämföra dessa med en databas över hur dessa enheter passar ihop baserat på tidigare erfarenheter.