Using standard HTTP protocol instead of Google API will speed up in collecting Web pages.The Max. limitation for each distinct IP will be 20,000 around (or less).JSK
Oi, achei teu blog pelo google tá bem interessante gostei desse post. Quando der dá uma passada pelo meu blog, é sobre camisetas personalizadas, mostra passo a passo como criar uma camiseta personalizada bem maneira. Até mais.
Thank you for your opinion. Actually I tried to connect Google by using HTTP, but it is failure. So I decided to utilize GoogleAPI.
Using curl library (http://curl.haxx.se/) will help you crawl pages smoothly and quickly.Be care! Don't let google ban your IPs.Good luck!JSK
Post a Comment
4 comments:
Using standard HTTP protocol instead of Google API will speed up in collecting Web pages.
The Max. limitation for each distinct IP will be 20,000 around (or less).
JSK
Oi, achei teu blog pelo google tá bem interessante gostei desse post. Quando der dá uma passada pelo meu blog, é sobre camisetas personalizadas, mostra passo a passo como criar uma camiseta personalizada bem maneira. Até mais.
Thank you for your opinion. Actually I tried to connect Google by using HTTP, but it is failure. So I decided to utilize GoogleAPI.
Using curl library (http://curl.haxx.se/) will help you crawl pages smoothly and quickly.
Be care! Don't let google ban your IPs.
Good luck!
JSK
Post a Comment