知乎爬蟲(chóng)SEARCH AGGREGATION
回答:Python是一種極少數(shù)能兼具簡(jiǎn)單與功能強(qiáng)大的編程語(yǔ)言，易于學(xué)習(xí)理解，入門(mén)容易，代碼更接近于自然語(yǔ)言和平時(shí)的思維方式，據(jù)統(tǒng)計(jì)顯示是世界上最受歡迎的語(yǔ)言之一。爬蟲(chóng)就是利用爬蟲(chóng)技術(shù)去抓取各論壇、網(wǎng)站數(shù)據(jù)，將所需數(shù)據(jù)保存到數(shù)據(jù)庫(kù)或是特定格式文件。具體學(xué)習(xí)：1）首先是學(xué)習(xí)Python基本常識(shí)學(xué)習(xí)，了解網(wǎng)絡(luò)請(qǐng)求原理、網(wǎng)頁(yè)結(jié)構(gòu)。2）視頻學(xué)習(xí)或者找一本專(zhuān)業(yè)網(wǎng)絡(luò)爬蟲(chóng)的書(shū)進(jìn)行學(xué)習(xí)。所謂前人栽樹(shù)后人乘涼，跟著大神的步...
yanest
|
898人閱讀
回答:你要做啥了，這幾個(gè)都選的話，夠嗆。mysql是后端，就是存儲(chǔ)數(shù)據(jù)的數(shù)據(jù)庫(kù)，其余三個(gè)是前端，爬蟲(chóng)的話，c++，java，python都可以，我個(gè)人使用python，scrapy框架，高級(jí)爬蟲(chóng)都需要框架的，多線程。如果要學(xué)爬蟲(chóng)的話，需要數(shù)據(jù)庫(kù)+一門(mén)語(yǔ)言，組合使用，至于數(shù)據(jù)分析，那就另當(dāng)別論了，比如hadoop什么的
Jaden
|
1170人閱讀
...。 github地址： https://github.com/lanbing510... 3. zhihu_spider – 知乎爬蟲(chóng) 此項(xiàng)目的功能是爬取知乎用戶(hù)信息以及人際拓?fù)潢P(guān)系，爬蟲(chóng)框架使用scrapy，數(shù)據(jù)存儲(chǔ)使用mongo github地址： https://github.com/LiuRoy/zhi... 4. bilibili-user – Bilibili用戶(hù)爬蟲(chóng) ...
微信、知乎、新浪等主流網(wǎng)站的模擬登陸爬取方法摘要：微信、知乎、新浪等主流網(wǎng)站的模擬登陸爬取方法。 網(wǎng)絡(luò)上有形形色色的網(wǎng)站，不同類(lèi)型的網(wǎng)站爬蟲(chóng)策略不同，難易程度也不一樣。從是否需要登陸這方面來(lái)說(shuō)，一些...
Python 知乎爬蟲(chóng)（最新） - 后端 - 掘金 環(huán)境：python3.x外部依賴(lài)包：requestsgithub項(xiàng)目地址 主要的問(wèn)題:模擬登陸： 知乎現(xiàn)在改用https請(qǐng)求了，數(shù)據(jù)加密，但是問(wèn)題不大，重要的是網(wǎng)頁(yè)數(shù)據(jù)改動(dòng)了，而且在請(qǐng)求時(shí)后臺(tái)會(huì)對(duì)爬蟲(chóng)做一...
...個(gè)外文網(wǎng)站。一時(shí)心血來(lái)潮，于是當(dāng)時(shí)想，如果拿來(lái)分析知乎這個(gè)網(wǎng)站，會(huì)有什么效果呢。有一些不一樣的地方是stackoverflow這個(gè)網(wǎng)站開(kāi)放了api，所以拿到數(shù)據(jù)是很方便的。知乎并沒(méi)有公開(kāi)api，只能采取爬蟲(chóng)手段。所以，很自然...
...個(gè)外文網(wǎng)站。一時(shí)心血來(lái)潮，于是當(dāng)時(shí)想，如果拿來(lái)分析知乎這個(gè)網(wǎng)站，會(huì)有什么效果呢。有一些不一樣的地方是stackoverflow這個(gè)網(wǎng)站開(kāi)放了api，所以拿到數(shù)據(jù)是很方便的。知乎并沒(méi)有公開(kāi)api，只能采取爬蟲(chóng)手段。所以，很自然...
...個(gè)外文網(wǎng)站。一時(shí)心血來(lái)潮，于是當(dāng)時(shí)想，如果拿來(lái)分析知乎這個(gè)網(wǎng)站，會(huì)有什么效果呢。有一些不一樣的地方是stackoverflow這個(gè)網(wǎng)站開(kāi)放了api，所以拿到數(shù)據(jù)是很方便的。知乎并沒(méi)有公開(kāi)api，只能采取爬蟲(chóng)手段。所以，很自然...
...個(gè)外文網(wǎng)站。一時(shí)心血來(lái)潮，于是當(dāng)時(shí)想，如果拿來(lái)分析知乎這個(gè)網(wǎng)站，會(huì)有什么效果呢。有一些不一樣的地方是stackoverflow這個(gè)網(wǎng)站開(kāi)放了api，所以拿到數(shù)據(jù)是很方便的。知乎并沒(méi)有公開(kāi)api，只能采取爬蟲(chóng)手段。所以，很自然...
...當(dāng)掌握的一些基本知識(shí)。而且，它還很有趣。 我是一個(gè)知乎輕微重度用戶(hù)，之前寫(xiě)了一只爬蟲(chóng)幫我爬取并分析它的數(shù)據(jù)，我感覺(jué)這個(gè)過(guò)程還是挺有意思，因?yàn)檫@是一個(gè)不斷給自己創(chuàng)造問(wèn)題又去解決問(wèn)題的過(guò)程。其中遇到了一些...
...第三：你已經(jīng)看完上面（第一或者第二）的教程：再推薦知乎用戶(hù)@陳唯源 的實(shí)戰(zhàn)練習(xí)博客 Python爬蟲(chóng)學(xué)習(xí)記錄（1）——Xiami全站播放數(shù)Python爬蟲(chóng)學(xué)習(xí)記錄（2）——LDA處理歌詞百度音樂(lè)帶標(biāo)簽，作曲，演唱者，類(lèi)別的歌詞數(shù)據(jù)Pytho...
...uestion/28629326 , title : 建筑工地上的青年如何自我成長(zhǎng)？ - 知乎 18:35:54.525 [ForkJoinPool.commonPool-worker-1] INFO c.s.s.sample.zhihu.SpiderZhiHuDemo - url: https://www.zhihu.com/question/28629319 , title : 國(guó)內(nèi)...
...近看了很多關(guān)于爬蟲(chóng)入門(mén)的文章，發(fā)現(xiàn)其中大部分都是以知乎為爬取對(duì)象，所以這次我也以知乎為目標(biāo)來(lái)進(jìn)行爬取的演示，用到的爬蟲(chóng)框架為 PHP 編寫(xiě)的 Beanbun。 項(xiàng)目地址：https://github.com/kiddyuchina/Beanbun 這次寫(xiě)的內(nèi)容為爬取知乎...
... 背景說(shuō)明：小拽利用php的curl寫(xiě)的爬蟲(chóng)，實(shí)驗(yàn)性的爬取了知乎5w用戶(hù)的基本信息；同時(shí)，針對(duì)爬取的數(shù)據(jù)，進(jìn)行了簡(jiǎn)單的分析呈現(xiàn)。demo 地址 php的spider代碼和用戶(hù)dashboard的展現(xiàn)代碼，整理后上傳github，在個(gè)人博客和公眾號(hào)更新代...
... 背景說(shuō)明：小拽利用php的curl寫(xiě)的爬蟲(chóng)，實(shí)驗(yàn)性的爬取了知乎5w用戶(hù)的基本信息；同時(shí)，針對(duì)爬取的數(shù)據(jù)，進(jìn)行了簡(jiǎn)單的分析呈現(xiàn)。demo 地址 php的spider代碼和用戶(hù)dashboard的展現(xiàn)代碼，整理后上傳github，在個(gè)人博客和公眾號(hào)更新代...
... 背景說(shuō)明：小拽利用php的curl寫(xiě)的爬蟲(chóng)，實(shí)驗(yàn)性的爬取了知乎5w用戶(hù)的基本信息；同時(shí)，針對(duì)爬取的數(shù)據(jù)，進(jìn)行了簡(jiǎn)單的分析呈現(xiàn)。demo 地址 php的spider代碼和用戶(hù)dashboard的展現(xiàn)代碼，整理后上傳github，在個(gè)人博客和公眾號(hào)更新代...
知乎多線程爬取問(wèn)題： 有哪些可以單曲循環(huán)一星期的歌曲值得推薦？ 那些單曲循環(huán)過(guò)的歌，有哪些句子打動(dòng)了你？) 自打放了寒假，我就一直想把系統(tǒng)的學(xué)習(xí)一遍Python爬蟲(chóng)的知識(shí)。因?yàn)橐郧爸皇橇闼榈膶W(xué)習(xí)，造成許多東西...
ChatGPT和Sora等AI大模型應(yīng)用，將AI大模型和算力需求的熱度不斷帶上新的臺(tái)階。哪里可以獲得...
大模型的訓(xùn)練用4090是不合適的，但推理（inference/serving）用4090不能說(shuō)合適，...
圖示為GPU性能排行榜，我們可以看到所有GPU的原始相關(guān)性能圖表。同時(shí)根據(jù)訓(xùn)練、推理能力由高到低做了...
