[dexonline] Despre tichete

Catalin Francu cata at francu.com
Thu Oct 20 16:07:18 EEST 2011


> E bine atunci. Dar cum putem rezolva problema dacă deținătorul acelui
> site interzice crawlarea definiției? Singura șansă este așa cum ai
> zis: luăm 8-10 cuvinte din orice definiție și le căutăm pe Google ...
> i-a indexat, perfect ... ce rezultă memorăm și căutăm dacă există în
> acea pagina (sau site) vreun link către www.dexonline.ro. Există
> posibilitatea ca unele site-uri să aibă pe o singură pagină, undeva,
> menționat: baza de date preluată de pe www.dexonline.ro ...

Asta ar putea fi o problemă: Dat fiind că ne bazăm pe Google, nu putem
depista clonele care interzic crawlarea. Pe de altă parte, dacă luăm
fraze la întâmplare, clonele nu se pot ascunde decât dacă interzic
crawlarea tuturor paginilor. Iar dacă fac asta se împușcă singure în
picior fiindcă își pierd traficul, deci putem presupune că sunt
indexabile.

Cătălin


More information about the dexonline mailing list