Aihe :Tietojen analyysi
Aihe :Tuotearvostelujen mielipideanalyysi
Tavoite :Tämän tehtävän tavoitteena on tehdä mielipideanalyysi tuotearvosteluista, jotta voidaan määrittää arvioijan mielipide tuotetta kohtaan.
Ohjeet :
1. Tietojen valmistelu :
- Kerää tietojoukko tuotearvosteluista sopivasta lähteestä (esim. Amazon, Yelp).
- Puhdista tiedot poistamalla päällekkäiset arvostelut, käsittelemällä puuttuvia arvoja ja muuntamalla teksti pienillä kirjaimilla.
2. Tutkiva tietojen analyysi :
- Tutki dataa ymmärtääksesi sen ominaisuuksia ja jakautumista.
- Suorita perustilastot, kuten tiheyslaskemat ja sanapilvet, tunnistaaksesi arvosteluissa käytetyt yleiset sanat ja ilmaukset.
3. Mielialan analyysi :
- Käytä sopivaa mielipideanalyysikirjastoa tai -työkalua (esim. TextBlob, VADER tai spaCy) antaaksesi mielipidepisteet jokaiselle arvostelulle.
- Ryhmittele arvostelut positiivisiin, negatiivisiin tai neutraaleihin luokkiin niiden mielipidepisteiden perusteella.
4. Ominaisuussuunnittelu :
- Poimi arvosteluista olennaiset ominaisuudet, jotka voivat vaikuttaa tunteeseen. Näitä voivat olla sanan taajuudet, välimerkit tai muut NLP:hen liittyvät ominaisuudet.
5. Koneoppimismalli :
- Kehitä valvottu koneoppimismalli arvioiden luokittelemiseksi positiivisiksi tai negatiivisiksi.
- Harjoittele mallia merkittyjen tietojen perusteella ja arvioi sen suorituskyky sopivilla mittareilla (esim. tarkkuus, tarkkuus, muistaminen ja F1-pisteet).
6. Mallin tulkinta :
- Visualisoi mallin ennusteet käyttämällä sekavuusmatriiseja tai muita asiaankuuluvia visualisointeja.
- Analysoi väärin luokitellut arvostelut löytääksesi parannuskohteita.
7. Raportointi :
- Kirjoita raportti, jossa on yhteenveto tunneanalyysin tuloksista.
- Sisällytä tiedot tietojen valmistelusta, tutkivasta data-analyysistä, ominaisuuksien suunnittelusta, mallikoulutuksesta ja arvioinnin tuloksista.
Lähetys :
- Lähetä seuraavat tiedot:
- Jupyter-muistikirja tai Python-skripti, joka sisältää koodisi ja analyysisi.
- PDF-raportti, jossa on yhteenveto tuloksista.
Määräaika :
- Tehtävän eräpäivä on [päivämäärä].
- Myöhästyneistä lähetyksistä peritään 10 %:n päiväsakko.