你問我網站的爬蟲技術,我爬蟲技術還不如你爬菜花呢
我這人老了,腦子也軟了,但網站這事兒我還真懂點。不過你問我爬蟲技術,我得說你問得太高級了。算了不扯這個了說遠了,我這腦子裏還記着十幾年前的事兒——那時候還沒網站,還得去人家攤上買個電腦,花了四十萬(好像三十來萬也記混了)買個三星筆記本,裏頭裝了個Windows XP,還得自己裝個IE6,連個防火牆都不裝,直接暴露在網上,讓黑客來找茬。嗐不聊這個了,說遠了,我這身體今天又不中了——先說正事兒,網站爬蟲技術,你問我還真懂點,但也沒你想像的那麼高大上。比如,我記得有一個老闆,他要爬個淘寶的商品數據,我跟他說:「你別爬,直接用API就行了,得有好些個API,你用錯了就得被封IP。」他聽了,好傢夥,還真懂得,說:「那我就用API吧,得嘞。」
不過,現在的網站越來越複雜了,有的還用了反爬蟲的技術,比如隨機的請求頭,或者用了CAPTCHA,讓爬蟲都爬不進去。我記得有一個同行,他花了大把錢買了個高級的爬蟲框架,結果還是被封了IP,他就哭鼻子了,說:「這爬蟲技術真沒用,得嘞。」我聽了,好傢夥,還真有點同情心,但也沒什麼好說的,你問我爬蟲技術,我就告訴你,現在的網站太複雜了,你要爬,得學點新技術,比如用Python去寫,或者用JavaScript去爬。不過,我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧,比如Scrapy,或者Selenium,得嘞。
不過,我還記得有一個老闆,他要爬個百度的搜索結果,我跟他說:「你別爬,直接用百度的API就行了,得有好些個API,你用錯了就得被封IP。」他聽了,好傢夥,還真懂得,說:「那我就用API吧,得嘞。」我記得他還花了大把錢買了個高級的API,結果還是被封了IP,他就哭鼻子了,說:「這API真沒用,得嘞。」我聽了,好傢夥,還真有點同情心,但也沒什麼好說的,你問我爬蟲技術,我就告訴你,現在的網站太複雜了,你要爬,得學點新技術,比如用Python去寫,或者用JavaScript去爬。不過,我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧,得嘞。
不過,我還記得有一個老闆,他要爬個京東的商品數據,我跟他說:「你別爬,直接用京東的API就行了,得有好些個API,你用錯了就得被封IP。」他聽了,好傢夥,還真懂得,說:「那我就用API吧,得嘞。」我記得他還花了大把錢買了個高級的API,結果還是被封了IP,他就哭鼻子了,說:「這API真沒用,得嘞。」我記得他還跟我抱怨,說:「我這人手頭緊,得花大把錢買個高級的爬蟲框架,結果還是不行,得嘞。」我聽了,好傢夥,還真有點同情心,但也沒什麼好說的,你問我爬蟲技術,我就告訴你,現在的網站太複雜了,你要爬,得學點新技術,比如用Python去寫,或者用JavaScript去爬。不過,我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧,得嘞。
現在年輕人哪懂這個啊,我這人老了,腦子也軟了,但網站這事兒我還真懂點。不過,我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧。不過,我這人身體不太行,得有好些次去醫院看病,花了大把錢,但效果還行不得嘞。我記得有一個老太太,她去醫院看病,花了大把錢,結果還是不行,她就哭鼻子了,說:「這醫院真沒用,得嘞。」我聽了,好傢夥,還真有點同情心,但也沒什麼好說的。
# 修路 我這兒的馬路,修得真慢,估摸着得有好幾個月,得有好些次被堵車,我得花大把時間等車,有時候還得走路,花了大把錢買個電動車,結果還是不行,得有好些次被堵車,我就跟居委會大媽吵了一架,她還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
# 菜價 菜價這事兒,真讓人沒法受,我這兒的菜價,估摸着得有好幾倍,我得花大把錢買個菜,有時候還得跑外地,花了大把錢買個菜,結果還是不行,得有好些次被菜價刁鑽,我就跟菜場攤販吵了一架,他還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
# 體檢 我這身體,真讓人沒法受,我這兒的體檢,估摸着得有好幾百塊錢,我得花大把錢買個體檢,結果還是不行,得有好些次被體檢結果刁鑽,我就跟社區醫院大夫吵了一架,她還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
記性不行了想起來再補吧
老闆的爬蟲之旅
這位老闆,他要爬的是京東的商品數據,我記得他花了大概三千塊錢買了個高級爬蟲框架,結果還是被封了IP。他跟我抱怨,說:「我這人手頭緊,得花大把錢買個高級的爬蟲框架,結果還是不行,得嘞。」我記得他還跟我提到過,他之前用的爬蟲框架是Scrapy,結果還是不行,他就換成了Selenium,結果還是不行。我記得他還跟我抱怨,說:「我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧,得嘞。」
我記得他還問我,爬蟲技術有沒有什麼新的技術,我就告訴他,現在的網站太複雜了,你要爬,得學點新技術,比如用Python去寫,或者用JavaScript去爬。不過,我這人腦子不太行,你問我爬蟲技術,我就告訴你,你還是去學個正經的爬蟲框架吧。他聽了,好傢夥,還真有點同情心,但也沒什麼好說的。
# 鄰居 我這兒的鄰居,真讓人沒法受,我這兒的鄰居,有時候還得花大把時間去吵架,我記得有一個鄰居,他每天都在吵架,花了大把時間,結果還是不行,我就跟他吵了一架,他還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
# 修路 我這兒的馬路,修得真慢,估摸着得有好幾個月,我記得有一個居委會大媽,她每天都在修路,花了大把時間,結果還是不行,我就跟她吵了一架,她還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
# 體檢 我這身體,真讓人沒法受,我記得有一個社區醫院,他每天都在體檢,花了大把時間,結果還是不行,我就跟他吵了一架,他還說:「你這人真不懂得,得嘞。」我聽了,好家甲,還真有點生氣,但也沒什麼好說的。
# 記憶 我這記性,真讓人沒法受,我記得有一個老太太,她每天都在記憶,花了大把時間,結果還是不行,我就跟她吵了一架,她還說:「你這人真不懂得,得嘞。」我聽了,好傢夥,還真有點生氣,但也沒什麼好說的。
困了先睡明天再說
評論1:商丘vivo售後服務電話