三亩地 三亩地SAN MU DI · CODE DIARY
ARTICLE DETAIL

日记详情

真实记录编程学习的某一天,欢迎挑你感兴趣的翻一翻。

【信息科学与工程学】【广告体系】 第十八篇 广告搜索体系算法01 SEO

【信息科学与工程学】【广告体系】 第十八篇 广告搜索体系算法01 SEO

互联网搜索引擎核心算法全景表

编号

类型

行业

领域

问题

问题的数学分析及算法设计思路

算法逐步推理思考的数学方程式和时序方程式和数学建模和参数列表及参数数值范围设计

代码(可编译运行的代码)

关联知识

1

后端-数据采集

互联网

爬虫/抓取

如何从海量网页中高效、合规地抓取全量内容?

将 Web 建模为有向图 G=(V,E),抓取过程即图的遍历;用优先级队列调度 URL,优先抓取高质量、高时效页面

数学建模:PageRank PR(pi​)=N1−d​+d∑pj​∈M(pi​)​L(pj​)PR(pj​)​,d∈[0.7,0.85];抓取优先级 Score(u)=w1​⋅PR(u)+w2​⋅Freshness(u)+w3​⋅Δ(u),w1​,w2​,w3​∈[0,1];时序方程 dtdQ(t)​=λin​(t)−μQ(t),λ 为发现速率,μ

← 返回列表