Ts'ebetso ea ho hlakola data, eo hape e tsejoang e le ho hlakola marang-rang, e kenyelletsa ho kenya data ka boiketsetso ho tsoa leqepheng la webo ho ea faeleng. Ho na le lisebelisoa tse ngata tsa ho hlakola tse fumanehang. Likhoebo le mekhatlo e meng sebelisa marang-rang kajeno bakeng sa ho fumana leseli ho bahlolisani, ho bapatsa, ho hira le mefuta e fapaneng ea litlhahlobo. Empa na web scraping e molaong?
Karabo ke hore e itšetlehile. Le hoja ketso ka boeona e se molaong, seo u se etsang ka data ka mor'a hore e be teng hlahletsoe e ka ba joalo.
Ho senya data ea hau
GDPR le melao e meng ea tlhahiso-leseling ea linaha tse fapaneng e thata haholo ha ho tluoa ho bokelleng le ho bolokeng lintlha tsa hau. Kahoo, haeba u ntse u hlakola boitsebiso ba botho, Haholo-holo ea baahi ba EU, o hloka ho ba le lebaka le utloahalang la ho etsa joalo. E ka ba:
- Tumello e hlakileng - ho ka etsahala ntle le haeba Melao ea Ts'ebeliso ea sebaka sa marang-rang e etsa hore basebelisi ba tsebe hore lintlha tsa bona li ka hlakoloa ha ba ingolisa. Tumello e khethehileng e hlakileng e ea hlokahala bakeng sa ho hlakola lintlha tsa bohlokoa.
- Thahasello e molaong - ho ka ba thata ho li-scrapers ho bonts'a hore ba na le tjantjello e nepahetseng ea ho hlakola le ho boloka tlhaiso-leseling ea motho, ntle le haeba e le ba ts'ebetsong ea molao kapa lefapha la mmuso.
GDPR e hloka ho sebetsana le data e ngata haholo kamoo ho hlokahalang ho phethela mosebetsi. Ka lebaka la hore ho senya marang-rang ka mokhoa o ikemetseng hangata ho sebetsana le data e ngata haholo ka sepheo se fapaneng, ho ka nkuoa ho fapana le tokisetso ena ea GDPR.
Ha data ea limilione tsa basebelisi ba Facebook le LinkedIn ho thoe e fumaneha inthaneteng, @kay_mahapa sheba #liteboho & boikarabello ba li-platform tsa media. https://t.co/FUqXMB1k7X e hatisitsoeng @BizMattersmag pic.twitter.com/I5awC1MTKG
- Molao oa Excello (@ExcelloLaw) La 22 Mmesa, 2021
Ka hona, haeba li-scraper tsa data li hloka ho sebetsana le tlhaiso-leseling efe kapa efe ea baahi ba EU, leha e fumaneha phatlalatsa, ba ka hloka ho fumana tumello ea bona e hlakileng kapa ho paka phaello e nepahetseng mme ba ikemiselitse ho fokotsa palo ea lintlha tse bokelletsoeng. Seo se bolela feela ho bokella se hlokahalang molemong o itseng / moreki eseng feela ho jarolla lethathamo lohle la mosebelisi la sehlopha sa LinkedIn ho kenyelletsa le boemo ba mosebelisi ka mong, mohlala.
Molao oa morao-rao oa litaba tsa botho oa Russia o tsoela pele. Ho tloha ka la 1 Hlakubele selemong sena, ho na le mofuta o mocha oa tlhaiso-leseling o bitsoang "data ea hau e lumelletsoeng ho hasoa". Seo se bolela, ho etsa mohlala, khatiso ea likhamphani tse kenyelletsang lintlha tsa hau ntle le lebitso le fane ea batho ba itseng (linepe, maemo) kapa li-CV ho liwebosaete tse batlang lihlooho. Ha e le hantle, e kenyelletsa tlhaiso-leseling e abuoang ke motho eo a e amohetseng. Tumello e joalo e ea tlama, mme taba ea data e na le tokelo ea ho kenyelletsa meeli efe kapa efe eo ba e batlang tumellong eo. Tumello ena e tlameha ho arolelanoa ke sebaka sa marang-rang.
Haeba moqapi oa data a lakatsa ho hlakola data e joalo marang-rang, ba tlameha ho latela meeli ea tumello eo. Mme haeba sengoloa sa data se arolelane data ea bona phatlalatsa ba le bang mme ha se so fane ka tumello, setheo se seng le se seng se sebelisang data ena se na le "moroalo oa bopaki ba hore ba sebetsana le data ka molao“. Ka hona, molao ona, joalo ka GDPR, o thibela ka matla hore na ho hlakoloa ha lintlha tse fumanehang phatlalatsa tse ka fumanehang sechabeng ho ka etsa matla afe.
Bosholu ba likhomphutha, data e nang le litokelo tsa mantlha, le ho latela
Ka 2019, Lekhotla la Boipiletso la US e tšoaretsoe qeto ea eona e emelang k'hamphani ea li-analytics ea hiQ khahlanong le LinkedIn hore data e fumanehang phatlalatsa mme e se na litokelo tsa molao e ka hlakoloa. Leha ho le joalo, seo se sebetsa boitsebisong bo fumanehang sechabeng feela.
HiQ Labs, Inc. V. Linkedin Corp.: Lekhotla la Federale le Lekanya ho Web Scraping, Puo ea Mahala… https://t.co/hIOWj2b2hE By @kay_mahapa
- Mondaq (@Mondaq) September 18, 2019
Kaha lits'oants'o tsa data li ke ke tsa hlakola lintlha tse sa fumaneheng phatlalatsa, LinkedIn e ne e ke ke ea sebelisa molao-taelo o loketseng - Molao oa Bosholu ba Khomphutha le Tlhekefetso - ho emisa hiQ. Molao feela e sireletsa litaba tsa lekunutu. Haeba, leha ho le joalo, k'hamphani e qhekellang data e fumana lifaele tse nang le litokelo tse joalo ka livideo ebe e li khutlisetsa hape molemong oa khoebo, seo ha se molaong tlasa molao oa litokelo.
Melao ea Ts'ebeletso ea liwebosaete tse ling e thibela ka ho hlaka ho hlakoloa ha data kapa ho khasa ha data ka mofuta ofe kapa ofe. Mantsoe ana a ka ba joalo e hlalositsoe faeleng ka har'a sesebelisoa sa motso oa sebaka sa marang-rang se bitsoang robots.txt. Ho u fa mohlala, ke hlahlobile robots.txt ea Twitter bakeng sa ho hlakola tumello. Mona ke skrini sa karolo e amehang ea lipehelo:
Joalokaha u bona, li-bots tsa ho hlakola li lumelloa ho hlakola li-hashtag empa e se leseli mabapi le basebelisi le leseli la balateli ba bona.
Likhoebo li itloaetsa ho lumellana joang?
Likhoebo tse fanang ka lits'ebeletso tsa ho hlakola data li tlameha ho latela melao le melaoana e le ho sireletsa litokelo tsa bareki ba tsona. Ba lokela ho buisana le moeletsi oa molao mabapi le hore na ke data efe e lumelletsoeng ho hlakoloa le hore na ho hlokahala laesense ea mofuta ofe bakeng sa eona. Ho feta moo, ba lokela ho kopa bareki ho saena tumellano e tlamang ka molao e hlalosang boitlamo le boikarabello ba bona mabapi le ts'ebeliso ea ts'ebeletso ea data scraping. Ho feta moo, likhoebo li lokela ho etsa bonnete ba hore lihlopha tsa bona li koetlisoa ka nepo mabapi le mekhoa e metle ea ts'ireletso ea data le ho latela melao ea lekunutu ha ba sebelisa ts'ebeletso.
Mme ho thoe'ng ka bafani ba litšebeletso tsa moemeli? Joaloka moetapele 'marakeng oa IPPN (IP proxy networks), Lintlha tse Khanyang e behile litekanyetso tse phahameng tsa ho lumellana le indasteri ea baemeli. Moreki e mong le e mong e mocha oa Bright Data Residential/mobile o hlahlojoa ka botlalo 'me o tlameha ho amoheloa ke ofisiri ea tsamaiso ho netefatsa hore nyeoe ea bona ea ts'ebeliso e fihlela litekanyetso tsa rona tse thata. Ts'ebetso e tebileng ea Bright Data e hloka hore bareki ba arolelane ID ea bona ea naha le ho saena setatemente sa rona sa tumellano har'a mekhoa e meng e fapaneng ea ho netefatsa boitsebiso.
Kahoo, molao oa ho hlakola data o ipapisitse le mofuta le boholo ba data e hlakotsoeng. Ho sa tsotelehe hore na boemo ke bofe, leha ho le joalo, kamehla ho molemo ho ba pepeneneng ka hohle kamoo ho ka khonehang mabapi le mekhoa ea hau ea ho senya le ho fumana boeletsi ba botsebi haeba u sa tsebe hantle. U kanna oa hloka tlhahlobo ea ts'ireletso ea ts'ireletso ea data tlasa GDPR joalo ka ha ba bang ba boholong ba lumela hore ho hlakola data ho ba "ts'ebetso e kotsi e sa bonahaleng".
Setšoantšo sa mokitlane: Tse hlahang setšoantšo e nkiloe ke Maxim Hopman. Setšoantšo sa skrini se nkuoe ke mongoli bakeng sa TechAcute.
mehloling Zyte / Alexander Demchenko (Boitsebiso) / Srishti Saha (datahut) / Litaba tsa GDPR / Stanislav Rumyantsev (IAPP) / Fiona Campbell (Setlhapi sa lihlapi)
