Ho qhekella ho akarelletsa ho inkela tlotla bakeng sa mehopolo, mantsoe, kapa litšoantšo tsa motho e mong, e leng mokhoa oo ho nahanoang ka oona e sa nepahaleng maemong a thuto le profeshenale. E ke ke ea hlokomeloa ke liithuti tse ka fetolelang mantsoe a motho e mong ka phoso ntle le tlhaloso e nepahetseng. Kaha matšoao a qotsa ha a sebelisoe ha ntho e itseng e hlalosoa ka mantsoe a mang, e ka phonyoha habonolo matsohong a mohlahlobi oa liphoso ebe e tsoela pele ho ea moralong oa ho qetela. Leha ho le joalo, e ke ke ea finyelloa ka ho feletseng, haholo-holo kaha bahlahlobi ba ho qhekella ba fumana tlhaloso e nepahetseng haholoanyane matsatsing ana.
Ho lemoha tlhaloso ea mantsoe e ka ba mosebetsi o boima, kaha o kenyelletsa ho tseba ho tšoana le ho se tšoane pakeng tsa litemana. Likarolong tse latelang, re tla shebana le puisano e felletseng mabapi le mekhoa le mekhoa e tloaelehileng e sebelisoang ho lemoha maemo a ho qolla mantsoe.
Bahlahlobisisi ba ho qhekella ba bona joang ho hlakisoa: Mekhoa e loketseng e hlahlobiloe
Sebakeng sa kajeno sa thuto, litlhahlobo tsa bosholu li se li tsoetse pele, li fetela ka nģ'ane ho feela ho tšoaea mongolo o kopilitsoeng ho fumana litaba tse qotsitsoeng. Sengoliloeng sena se hlahloba mekhoa e lumellang lisebelisoa tsena ho tsebahatsa mantsoe a qotsitsoeng hantle.
1. Ho bapisa likhoele
Mokhoa ona o kenyelletsa ho bapisa litemana tse boemong ba sebapali kapa mantsoe ho supa lintho tse lumellanang hantle. Ho tšoana ho phahameng ka tatelano ea litlhaku kapa khetho ea mantsoe pakeng tsa litemana tse peli ho ka bontša ho qaqisa mantsoe. Lisebelisoa tsena li sebelisa li-algorithms tse rarahaneng tse ka utloisisang moelelo oa moelelo oa mantsoe, e leng ho etsang hore ho be thata le ho feta hore lintho tse ngotsoeng ka mantsoe a mang li se ke tsa bonoa.
2. Ho tšoana ha Cosine
Ho tšoana ha Cosine ke e 'ngoe ea mekhoa eo ka eona bahlahlobi ba bosholu ba bonang ha ho bapisoa. E lekanya ho tšoana ho teng lipakeng tsa litemana tse peli ho ipapisitse le sekhutlo lipakeng tsa liemeli tsa bona sebakeng se phahameng. Ka ho emela litemana e le li-vector tsa maqhubu a mantsoe kapa a kenyelelitsoeng, lisebelisoa tsena li ka kopanya lintlha tsa ho tšoana ha cosine ho ntlafatsa bokhoni ba tsona ba ho bona litaba tse qotsitsoeng.
3. Mehlala ea ho tsamaisana le mantsoe
Mehlala ena e hokahanya mantsoe kapa lipolelo lipakeng tsa litemana tse peli ho hloaea mangolo a tsona. Ka ho bapisa likarolo tse tsamaellanang, u ka khona ho bona liphatlalatso tse ipapisitseng le ho tšoana le liphapang tsa tatellano e tsamaellanang.
4. Tlhahlobo ea semantic
Mokhoa ona o kenyelletsa ho sekaseka moelelo le moelelo oa mantsoe le lipoleloana litemaneng. Mekhoa e kang latent semantic analysis (LSA), ho kenya mantsoe (joaloka Word2Vec kapa GloVe), kapa mekhoa e tebileng ea ho ithuta e kang BERT e ka hapa likamano tsa semantic pakeng tsa mantsoe le ho khetholla tlhaloso e thehiloeng ho tšoana ha litlhaloso tsa bona tsa mantsoe.
5. Ho ithuta ka mochini
Litaolo tsa ho ithuta ka mochini tse hlokometsoeng li ka koetlisoa ho li-datasets tse ngoliloeng tsa lipara tsa litemana tse qapiloeng ka mantsoe a mang. Mehlala ena e ka ithuta lipaterone le likarolo tse khethollang liphatlalatso 'me li ka sebelisoa ho hlophisa maemo a macha a sengoloa joalo ka ha a hlalositsoe kapa che.
6. Tlhahlobo ea N-gram
N-grams ke lihlopha tsa mantsoe a bapileng hantle. Ha u sheba hore na lihlopha tsena li hlaha hangata hakae litemaneng tse fapaneng 'me u li bapisa, u ka fumana lipolelo kapa tatellano e tšoanang. Haeba ho na le mekhoa e mengata e tšoanang, ho ka bolela hore mongolo o ka be o hlalositsoe ka mantsoe a mang.
7. Haufi le ho fumana likopi
Mokhoa oa ho qetela oo bahlahlobi ba bosholu ba bonang ho hlakisoa ka nepo.
Litaolo tsa ho lemoha tse haufi-ufi li sebelisoa hangata ho sibolla ka mantsoe a mang ho supa likarolo tsa mongolo tse bontšang ho tšoana ho holimo kapa tse batlang li tšoana. Li-algorithms tsena li etselitsoe ho lemoha litaba tse qotsitsoeng ka ho bapisa ho tšoana ha mongolo ka botlalo.
Ke mokhoa ofe o atisang ho sebelisoa ke software ea thibelo ea bosholu?
Litharollo tsa theknoloji tse sebelisoang ke lits'ebeletso tsa thibelo ea bosholu hangata li itšetleha ka tlhahlobo ea n-gram. Ka ho sebelisa theknoloji e thehiloeng ho n-gram, lits'ebeletso tsena li fihlela lebelo le holimo haholo. Ena ke e 'ngoe ea mekhoa e metle ka ho fetisisa ea li-plagiarism checkers ho lemoha ho qaptjoa ha mantsoe, ho thusa ho tseba le ho totobatsa mantsoe a ngotsoeng bocha.
Mechanics ea hore na bahlahlobi ba bosholu ba lemoha joang ho hlakisa
Litšebeletso tsa thibelo ea boqhetseke hangata li sebelisa mokhoa oa ho hatisa menoana ho bapisa litokomane. Sena se kenyelletsa ho ntša li-n-gram tse hlokahalang litokomaneng tse lokelang ho netefatsoa le ho li bapisa le li-n-gram tsa litokomane tsohle tse polokelong ea tsona.
mohlala
Ha re re ho na le polelo: « Le mont Olympe est la plus haute montagne de Grèce. »
The n-gram (mohlala, 3 grams) polelong ena e tla ba:
- Le mont Olympe
- Mont Olympe est
- Olympe est la
- ke eona e kholo
- la plus haute
- thaba e phahameng ka ho fetisisa
- haute montagne de
- montagne de Grece
Taba ea 1. Ho nkela sebaka
Haeba lentsoe le nkeloa sebaka ke lentsoe le leng, ho ntse ho le joalo ba bang ba n-gram match mme hoa khonahala ho lemoha phapanyetso ea lentsoe ka tlhahlobo e tsoelang pele.
Polelo e fetotsoeng: "The lithaba Olympe est la plus haute montagne de Péloponnèse. »
| Ligrama tse 3 tsa pele | 3-grams ea mongolo o fetotsoeng |
| Le mont Olympe Mont Olympe est Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece | Le lithaba Olympus lithaba Olympe est Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de Montagne de Péloponnèse |
Taba ea 2. E fetotse tatellano ea mantsoe (kapa lipolelo, lirapa)
Ha taelo ea polelo e fetoloa, ho ntse ho le joalo ligrama tse 3 li bapisa kahoo ho ka khoneha ho lemoha phetoho.
Polelo e fetotsoeng: « La plus haute montagne de Grèce est Le mont Olympe. »
| Ligrama tse 3 tsa pele | 3-grams ea mongolo o fetotsoeng |
| Le mont Olympe Mont Olympe est Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece | La plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece de Grece est Grece est Le est Le mont Le mont Olympe |
Taba ea 3. Ho ekelitsoe mantsoe a macha
Ha mantsoe a macha a kenyelletsoa, ho ntse ho e-na le ligrama tse 3 tse lumellanang kahoo ho ka khoneha ho lemoha phetoho.
Polelo e fetotsoeng: « Le mont Olympe est hotswa hole la plus haute montagne de Grèce. »
| Ligrama tse 3 tsa pele | 3-grams ea mongolo o fetotsoeng |
| Le mont Olympe Mont Olympe est Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece | Le mont Olympe Mont Olympe est Olympe est de e hole haholo hole koana loin la plus la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece |
Taba ea 4. E hlakotse mantsoe a mang
Ha lentsoe le tlosoa, ho ntse ho e-na le ligrama tse 3 tse lumellanang kahoo ho ka khoneha ho lemoha phetoho.
Polelo e fetotsoeng: « L'Olympe est la plus haute montagne de Grèce. »
| Ligrama tse 3 tsa pele | 3-grams ea mongolo o fetotsoeng |
| Le mont Olympe Mont Olympe est Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece | L'Olympe est la ke eona e kholo la plus haute thaba e phahameng ka ho fetisisa haute montagne de montagne de Grece |
Mohlala oa sebele oa lefatše
Ha ho phetheloa netefatso tokomaneng ea 'nete, likarolo tse qotsitsoeng hangata li khetholloa ka matšoao a sitisoang. Litšitiso tsena, tse bolelang mantsoe a fetotsoeng, li totobatsoa ho matlafatsa ponahalo le phapang.
Ka tlase, u tla fumana mohlala oa tokomane ea sebele.
- Phatlalatso ea pele e tsoa ho faele e netefalitsoeng ho sebelisoa file ea OXSICO tšebeletso ea ho thibela bosholu:
- Karolo ea bobeli e tsoa tokomaneng ea mohloli oa mantlha:
Ka mor'a tlhahlobo e tebileng, ho hlakile hore karolo e khethiloeng ea tokomane e ile ea hlalosoa ka ho etsa liphetoho tse latelang:
| Sengoloa sa mantlha | Mongolo o hlakisitsoeng | liphetoho |
| tšehetsa popontshwa e boetse e tšoauoa | Backs up innovation e boetse e hlalosoa | Ho nkeloa sebaka |
| tsebo ea moruo le ea sechaba, mekhoa e sebetsang hantle | temoho ea moruo le sechaba, mokhatlo o sebetsang hantle | Ho nkeloa sebaka |
| litlhahiso (maikutlo) | tlhahiso | Phetoho, ho hlakolwa |
| maikutlo | maemo | Ho nkeloa sebaka |
| lebisang katlehong | mohlodi | Ho nkeloa sebaka |
| mokhoa (Perenc, Holub-Ivan | ts'ebetso ea kelello (Perenc, Holub - Ivan | Ho phaella moo |
| ts'epahatso ea boqapi | e tšoanelang | Ho nkeloa sebaka |
| ho theha boemo ba lehodimo | : ho theha boemo | Ho nkeloa sebaka |
| e tšoanelang | atlehisa | Ho nkeloa sebaka |
| ho holisa tsebo | temoho ya ntshetsopele | Ho nkeloa sebaka |
fihlela qeto e
| Ho qhekella, hangata ho sa bonoeng maemong a ho qotsa mantsoe, e ntse e le taba e tšoenyang haholo lithutong tsa thuto. Tsoelo-pele ea theknoloji e kentse bahlahlobi ba ho qhekella ka bokhoni ba ho tseba hantle litaba tse qotsitsoeng. Haholo-holo, bahlahlobi ba ho qhekella ba bona ho qaptjoa ka mekhoa e fapaneng joalo ka ho bapisa likhoele, ho tšoana ha cosine, le tlhahlobo ea n-gram. Ka ho hlakileng, tlhahlobo ea n-gram e hlahella ka sekhahla sa eona se phahameng se nepahetseng. Likhatelo-pele tsena li fokotsa haholo monyetla oa hore lintho tse ngotsoeng le tse hlalositsoe ka mantsoe a mang li se ke tsa bonoa, ka hona li matlafatsa botšepehi ba thuto. |
