Načtění většího počtu webů (aktuálně přes curl -> pomalé) – PHP – Fórum – Programujte.com

Zdravím,

načítám data cca ze 30 webů a využívám curl. Celý proces trvá cca 40 sekund, což se mi zdá moc. Jsou nějaké obecné tipy, jak zrychlit práci s curl, případně využít nějakou rychlejší třídu? Stránku vždy načtu, vytáhnu si z ní potřebná data a uzavřu spojení.

Děkuji za každou radu.

Chápu, že bez konkrétního kódu to je asi složité radit, ale zajímají mě spíš nějaké obecné "poučky"...

Děkuji.

mozna tak pouzit vlakna, nebo pokud jsou tam porad stejne data aspon par hodin, tak nejakou cache (kterou muzes obnovovat mimo)

#1 ShaiMagal
Mohol by si vyskúšať toto: http://php.vrana.cz/asynchronni-dotazy-v-curl.php

#2 KIIV

Nějaký konkrétní link na použití vláken? Ta data jsou pokaždé jiná, takže cache bohužel nic nevyřeší :-/

#3 m->29
Děkuji, vyzkouším to a dám vědět.

#5 crazy
Vygooglit jsem si to samozřejmě mohl, ale zajímalo mě, jestli máš na mysli třeba nějaký konkrétní artikl, proto jsem se ptal.

Prozatím děkuji. Jdu to prozkoumat a dám vědět...

Výsledek:

Použití vláken problém vyřešil a vše je již v pořádku. Trvá to z původních 40 sekund asi 5, takže spokojenost a děkuji za rady :)

#7 ShaiMagal
Označuj příspěvek, který ti pomohl možností "Označit jako řešení". Jinak díky, že si napsal i výsledek, tohle se bude hodit i dalším lidem :-).