Index Webových Stránek – PHP – Fórum – Programujte.com

Čau jelikož dělám webový vyhledávač což už mám tak chcu aby se to nepřidávalo jen po jedne stránce ale po více stránek třeba že napíšu google.cz tak mi to vše najde a zaindexuje do mysql O Googlu , Google Vyhledávač , Google Plus , atd... něco podobného je sphider.... :) WEB : http://mccowmods,mzf.cz/

Nemáš vyhledávač. Protože to by jsi musel vlastnit obdobnou DB jako má Google. A protože ji nemáš, tak je jasné, že používáš GoogleSearch. A proto se ti jen musím smát, jak se tu chlubíš něčím takovým...

Ne nemáte pravdu můj vyhledávač vyhledává v MySql databázi kde jsou uložené stránky :)

#3 Domiš -Mickey-
Pak ale vyhledává jen v pár stránkách a není prakticky použitelný. MySQL určitě není vhodný typ databáze pro tyto účely. Mimoto potřebuješ hodně výkonného robota na indexování webů a samozřejmě to nelze provozovat na jednom serveru.

Co se týče původního dotazu, tak těch možností je několik. Nejjednodušší je asi projít html kód stránky, vyhledat odkazy, rozdělit je na vnitřní a vnější a postupně projít ty vnitřní. Samozřejmě musíš ukládat, kdy jsi kterou stránku navštívil, abys mohl prběžně provádět aktualizace nasbíraných dat.

#3 Domiš -Mickey-
To odpovídá tomu, jak je to nefukční. Je nereálné konkurovat Googlu. Je to projekt k ničemu - ztráta času - umřeš zbytečně brzo kvůli tomu... :D

Za Googlem stojí miliardové korporace. Nestačily by ti na to milióny - musel by jsi mít miliardy... Tedy na to, aby jsi mohl konkurovat Googlu. Každý idiot by dokázal udělat jednoduchý vyhledávač - kdyby měl zdroj DB, a do ní cpal dotazy. Tady jde o ty peníze a o dobu, za kterou se dokázal Google všude zakořenit.

Brzo to budu hostovat v racku který stojí 200 000 ročně a to je teda dost hodně takže by to mohlo , a ještě jak se takový robot vytváří?

#6 Domiš -Mickey-
Máš opravdu naivní představy, zkus se podívat na jakém železe jede google, nebo i malý vyhledávač typu seznam.

Jestli něco vyděláš, tak -200 000 Kč. Dále se zeptám - k čemu to bude? I kdyby jsi měl miliardy a udělal ten vyhledávač. K čemu? Google tu je a není to jen vyhledávač. Takže i ty by jsi musel udělat prvně něco více, než Google. A k čemu? Tohle není sen - to je nějaká psychicá porucha... (Vždyť si neuvědomuješ své sebedestruktivní chování - to hraničí s masochismem...)

z_moravec pošli mi jak vypadá server kde je google

#9 Domiš -Mickey-
Co tak zagooglovat?

http://www.google.com/about/datacenters/

Zabírá to 4 haly... (Velké haly... :D)

https://www.google.cz/search?hl=cs&site=imghp&tbm=isch&source=hp&biw=1278&bih=962&q=google+server&oq=google+server&gs_l=img.3...3670.6418.0.7609.13.11.0.2.0.0.269.1001.7j2j1.10.0....0...1ac.1.26.img..8.5.369.qxS9ECyoqko

uppps :) 

Google má navíc servery po celém světě... :D

A kolik lidí je obsluhuje... :D A tady přijde jeden sotva programátor - a chce převálcovat Google... :D

Po celém to zas ne... :D

Má...

Prostě chceš překonat miliardovou korporaci - co čekáš? Že jede na nějakém IPhonu? :D

Tak mám se do toho pustit nebo ne naplno?

Ty jsi fakt narušený... Jak chceš sehnat tolik pozemků, lidí, PC atd.? Kde máš ty miliardy na to?

Chtěl jsem si jen prostě udělat vyhledávač ne youtube atd...

Mamíííí. Máš miliardu - 1? Máš 2? Máš 20? Pak ano - jdi do toho! Nemáš? Kdo by to používal, kdyby to umělo najít jen 4 slova? A zapomeneme na peníze - máš 200 miliard - kdo by to používal? Proč by opustil Google? K čemu by to bylo?

Myslel jsem si že mi pomůžete s tím indexováním a vy mně jen furt poučujete!

Nemáš 200 miliard. Problém vyřešen. Vydělej je a má smysl ti radit dál. Takhle jen dokazuješ svoji hloupost...

Nejsem hloupy to si zase moc nedovoluj

#20 Domiš -Mickey-
Můžeš začít studovat třeba tady:

http://infolab.stanford.edu/~backrub/google.html

Nebo? Hloupý jsi 100%. Vždyť se ti vůbec nedá domluvit. Nenapsal jsi jediný rozumný důvod proč vůbec dělat vyhledávač. Nenapsal jsi jedinou rozumnou větu - jak to chceš udělat. Já tě nehodlám podporovat v sebevražedné misi. Nikdy v životě mě nenapadlo chtít udělat druhý Google, druhé WoW atd. Vím na co mám - proč jen tihle nováčci musí být tak idealističtí... :D

Stránku jsem zastavil!

Konečně! :D V prvé řadě si zvol životní cestu. A ne vzdušný zámek. Můžeš dělat ve funkcionálním programování pro AI - třeba se pokusit překonat Argument čínského pokoje atd.

Koukám, že jste tu Domiš -Mickey- pěkně rozebrali :)

#24 Matěj Andrle
Proč by měl být hloupý? Já si myslím, že každý z nás měl takové sny ;)

#28 crazy
Souhlas, nemusí se nic podařit, důležité je se na tom něco naučit.

#28 crazy
Čti co píši - šlo mi o to, že chtěl v projektu pokračovat i když jsme se mu snažili vysvětlit, jak je to nereálné. Co se může naučit na něčem, co nemůže vytvořit? Leda, že je hloupý, nic neumí a nikdy nebude programátorem. Z tohohle jiného, než deprese nevznikne... Jedna věc je mít vzdušný zámek a druhá snažit se jej naplnit... Myslím to upřímě a vážně. Když se bude honit za sny, brzy narazí na to, že to nikam nevede... Když se prvně naučí pořádně programovat a bude sledovat aktuální horké pozice, bude mít naději...

#30 Matěj Andrle

To už trochu přeháníš. To že se snaží o realizaci obtížného, příp. nerálného projektu rozhodně neznamená, že nemůže být dobrým programátorem, nebo že je hloupý. Kdyby všichni uvažovali tímto způsobem, tak dodnes žijeme v jeskyních.

#31 z_moravec
? Opravdu čtěte, co píši. Píši, že když bude dělat do nereálného projektu, narazí a přijde deprese - vzdá to a bude se podceňovat... Bude si připadat neschopný atd. Učil jsem už tolik lidí - jen málo kdo to nevzdal. Takže vím o čem mluvím - chcte to od začátku mít na dohled horizont...

#32 Matěj Andrle
Jak už psal Martin Kozibrátka:

Souhlas, nemusí se nic podařit, důležité je se na tom něco naučit.

Matěj Andrle - Takova ostuda, ze tu taci lidi jeste jsou, co se takhle navazeji do druhych :) At si dela, co chce, ne? Treba je to pokusny nebo skolni projekt.

Domiš -Mickey- - Ti to vsechno uz psali. Google dostane stranku, v ni vyhleda odkazy. Interni projde a vyhleda dalsi odkazy, externi si ulozi k pozdejsimu prohledavani. Soucasne si pritom ulozi text bez html a soucasne vyradi stranky presahujici 40k nebo ty, ktere obsahuji velky pomer html / plain-text (cili, kdyz tam nekdo nacpe js, css ne externe). Co se tyce indexu, tak google ma servery s daty a servery s indexy. Cili, na jednom serveru lide vyhledavaji a ten je zatizen a jiny server posila data prislusici k indexum (vsechno se posila gzipovane). Indexove servery ma pak ve vetsim poctu, datovych pak tolik netreba. Cas od casu pak dela aktualizece. Navic ma nejspis indexy rozhozene na servery podle pismen, dvojpismen. A ty, ktere se vyhledavaji casteji, tak ma vicekrat zklonovane. Proste, je to silene komplikovana zalezitost.

Seznam.cz bych jako vyhledavac neuvadel, ten je proti google nicka a navic 10x vic zatezuje tvou stranku nez google, jestli si vedes nekde navstevnost stranky vyhledavaci. Navic si myslim, ze vyhledavace seznam moc neumim, on je predevsim katalog stranek. Co si tam uzivatele registruji, to tam je. ten humbug, co delal v tv, najdes tam, co neznas, ten byl trapny, protoze na seznamu nic neni, to neni vyhledavac :) Ledaze bys hledal nejakou firmu, tak je 1:10 sance, ze ma stranky a ze je nekdo registroval do seznamu.
 

Jsem tu zase celý ten projekt obnovím díky vám že jste se mě zastali doufám že mi pomůžete :)