第四百九十七章 有些人一出生就不一樣啊
,最快更新超級(jí)金錢帝國(guó) !
網(wǎng)意搜索引擎。
在后世擁有國(guó)內(nèi)唯一的互動(dòng)性開放式目錄管理系統(tǒng)!
最關(guān)鍵的是,網(wǎng)意基本搜索的適合,查詢結(jié)果嚴(yán)謹(jǐn)細(xì)致,能幫助用戶找到最重要、最相關(guān)的內(nèi)容。例如,當(dāng)網(wǎng)易搜索對(duì)網(wǎng)頁(yè)進(jìn)行分析時(shí),它也會(huì)考慮與該網(wǎng)頁(yè)鏈接的其它網(wǎng)頁(yè)上的相關(guān)內(nèi)容。網(wǎng)易搜索還會(huì)先列出那些搜索關(guān)鍵詞相距較近的網(wǎng)頁(yè)。
而在搜索多個(gè)詞語(yǔ)的時(shí)候,網(wǎng)意搜索只會(huì)返回那些符合用戶的全部查詢條件的網(wǎng)頁(yè)。不需要在關(guān)鍵詞之間加上“and”或“+”。如果用戶想縮小搜索范圍,只需輸入更多的關(guān)鍵詞,只要在關(guān)鍵詞中間留空格就行了。
這完全就符合張偉現(xiàn)有需要的條件啊,網(wǎng)意搜索這個(gè)名字在后世雖然并不太出名,可是說(shuō)到另外一個(gè)名字相信很多人就能耳熟能詳了——有道搜索!
其中有道搜索包括網(wǎng)頁(yè)搜素、購(gòu)物搜索、海量詞典、視頻搜索、圖片搜索等一系列,里面的智能結(jié)果和精選搜索就是張偉現(xiàn)在想要的模式,他馬上回憶起搜索流程,結(jié)合自己的猜測(cè)。
按照當(dāng)時(shí)搜索時(shí)的情況,張偉開始推測(cè),很多部分應(yīng)該和傳統(tǒng)搜索沒(méi)什么兩樣,那么新式搜索需要需要根據(jù)一定的網(wǎng)頁(yè)分析算法過(guò)濾與主題無(wú)關(guān)的鏈接,保留有用的鏈接并將其放入等待抓取的資源管理器隊(duì)列,然后,要根據(jù)一定的搜索策略從隊(duì)列中選擇下一步要抓取的網(wǎng)頁(yè)資源,并重復(fù)上述過(guò)程,直到達(dá)到系統(tǒng)的某一條件時(shí)停止,另外,所有被抓取的網(wǎng)頁(yè)西藥存貯,再進(jìn)行一定的分析、過(guò)濾,并建立索引,以便之后的查詢和檢索!
也就是說(shuō),前提需要一個(gè)自動(dòng)抓取萬(wàn)維網(wǎng)信息的程序或者腳本。
這些話對(duì)于常人來(lái)說(shuō)都是廢話,可是張偉知道,對(duì)于專業(yè)人士就不是廢話了!
克里斯等人不就是需要個(gè)流程嗎?
張偉迅速拿起筆和本子記錄了下來(lái),這些根本不用動(dòng)腦子,因?yàn)槎际亲约河H身經(jīng)歷過(guò)的事情,只需要按照步驟稍加添加自己的想法就可以。
瑤瑤玩了會(huì),道:“張偉,你要不要玩電腦?”
“暫時(shí)用不上了。”張偉刷刷在本子上寫著。
瑤瑤調(diào)皮地對(duì)著柳傾城做了個(gè)鬼臉,“看,張偉不要用,我再玩一會(huì)。”
柳傾城哭笑不得道:“你呀你,那就再玩一小會(huì),眼睛離電腦遠(yuǎn)點(diǎn)。”
瑤瑤啪嗒啪嗒按照鼠標(biāo),叫道:“姐姐,你過(guò)來(lái)教我打字。”
張偉抬頭笑道:“原來(lái)你不會(huì)打字啊?”
一行!
兩行!
五行!
他很快就寫完了!
心情徹底興奮了起來(lái),這些東西寫出來(lái),估計(jì)能幫到克里斯他們的忙吧?張偉期待著!
……
很晚才睡覺(jué)。
可是張偉老早就起來(lái)了。
再次拉著鄭文跑了一圈網(wǎng)景。
剛一走進(jìn)去,就看見(jiàn)辦公區(qū)的工作人員都在忙碌,一看見(jiàn)張偉和鄭文后,這些員工就問(wèn)好起來(lái)。
“BOSS。”
“鄭總。”
“張先生。”
眾人都露出了笑容。
正巧,克里斯剛剛過(guò)來(lái)工作。
張偉微笑道:“你們先忙著,克里斯,你過(guò)來(lái)一下。”話剛說(shuō)完,瞧見(jiàn)負(fù)責(zé)研發(fā)這款產(chǎn)品的技術(shù)人員都走了進(jìn)來(lái),他補(bǔ)充了一句,“你們都過(guò)來(lái),我和你們說(shuō)點(diǎn)事情。”
克里斯道:“什么事?我們還要忙著研發(fā)產(chǎn)品,昨晚稍微有點(diǎn)眉目。”
羅曼嘿道:“是啊,或許這是一個(gè)突破也說(shuō)不準(zhǔn)。”
泰勒打了個(gè)哈欠,道:“可把我累壞了,昨晚兩點(diǎn)多才睡,清早六點(diǎn)多就爬起來(lái)了。”
看得出來(lái)大家都非常疲勞。
張偉和鄭文對(duì)視了一眼,也沒(méi)有上樓,直接把眾人拉到一旁角落的辦公桌,又叫人拿來(lái)椅子。
眾人坐下。
“那我就說(shuō)一下我猜測(cè)的流程,你們聽(tīng)聽(tīng)有什么啟發(fā)沒(méi)有。”張偉拿出小本子翻開。
聞言,克里斯一愕。
泰勒也愣了愣。
羅曼和其他人也有些呆。
你說(shuō)什么?你猜測(cè)的流程?這他媽也能猜測(cè)啊還能對(duì)我們有啟發(fā)?昨天還說(shuō)要找人問(wèn)問(wèn),怎么現(xiàn)在又變成你自己猜測(cè)了?這么多精英技術(shù)人員攻克了許久的都只是稍有眉目而已,你一個(gè)連互聯(lián)網(wǎng)都不懂的人光靠猜測(cè)就行了?我去,你以為你是上帝啊?是造物主啊?怎么想都能變成現(xiàn)實(shí)?
眾人已經(jīng)全部無(wú)語(yǔ)。
克里斯憋了半天,也沒(méi)好意思說(shuō)別的,“那你說(shuō)我們聽(tīng)聽(tīng)。”
張偉也知道他們不相信,道:“反正你們就聽(tīng)聽(tīng)看又沒(méi)什么損失對(duì)不對(duì)?”
泰勒難以置信道:“會(huì)對(duì)我們有啟發(fā)?”
“應(yīng)該會(huì)有吧。”張偉瞟了眼本子上的文字,說(shuō)道:“需要根據(jù)一定的網(wǎng)頁(yè)分析算法過(guò)濾與主題無(wú)關(guān)的鏈接,保留有用的鏈接并將其放入等待抓取的資源管理器隊(duì)列。”
鄭文不太懂,瞟了瞟眾人。
可是眼前這些人懂啊,他們乍一聽(tīng)的感覺(jué)……簡(jiǎn)直驚艷!按照張偉所說(shuō)的里面包含了三個(gè)步驟,一,用戶提供種子URL;二,種子URL進(jìn)入linkbase中新URL隊(duì)列中;三,調(diào)度模塊選取url進(jìn)入到抓取模塊的待抓取隊(duì)列中,大家都是專業(yè)人士,一聽(tīng)就知道完全可行啊!張偉這個(gè)推測(cè)簡(jiǎn)直太棒了!聽(tīng)著這個(gè)推測(cè),他們都面面相覷,怎么這么簡(jiǎn)單的事情他們就沒(méi)想到呢?在場(chǎng)十幾個(gè)精英都沒(méi)想到的事情,居然讓一個(gè)不懂網(wǎng)絡(luò)的人想到了!
克里斯忍不住贊嘆道:“好創(chuàng)意!”
張偉笑瞇瞇道:“我繼續(xù)說(shuō)下去,然后根據(jù)一定的搜索策略從隊(duì)列中選擇下一步要抓取的網(wǎng)頁(yè)資源,并重復(fù)上述過(guò)程,直到達(dá)到系統(tǒng)的某一條件時(shí)停止,另外,所有被抓取的網(wǎng)頁(yè)西藥存貯,再進(jìn)行一定的分析、過(guò)濾,并建立索引,以便之后的查詢和檢索。”
克里斯興奮了起來(lái),道:“那就是抓取模塊讀取站點(diǎn)的配置文件,可以按照?qǐng)?zhí)行的頻率進(jìn)行抓取,等到抓取到結(jié)果就返回pipeline接口中,這就是完成了抽取!”
羅曼也道:“然后把新發(fā)現(xiàn)的連接在linkbase里面進(jìn)行dedup,并push到linkbase的新URL模塊里面,最后讓調(diào)度模塊選取url進(jìn)入抓取模塊的待抓取隊(duì)列,之后就能反饋了啊!”
張偉和鄭文不懂這些,聽(tīng)得雨里霧里,可是接下來(lái)這些專業(yè)人士說(shuō)的話讓他們至少明白一點(diǎn),這個(gè)推測(cè)可行!
泰勒結(jié)結(jié)巴巴道:“這……這就是抓取流程了?”
克里斯非常堅(jiān)定道:“我覺(jué)得有百分之八十的成功率!可以試試看!”
聽(tīng)到最專業(yè)的克里斯這么說(shuō),十幾個(gè)人都非常驚奇地看了一眼張偉,他們?cè)趺匆蚕氩幻靼祝粋€(gè)網(wǎng)絡(luò)上的外行,卻能大致推算出流程?難道這就是天生的妖孽?怪不得人家十幾歲就能執(zhí)掌龐大的資產(chǎn)!怪不得華金資本被經(jīng)營(yíng)的有模有樣!上天果然是有區(qū)別的,有些人一出生就他媽和別人不一樣啊!(未完待續(xù)。)