- 主题:还没上线，每隔5天，固定倍消耗1个G流量，怎么破
网站还没有正式上线，知道的人很少，查看流量，发现每隔5到6天，固定被调用几百次，
才生1G左右的流量。
有人告诉我是搜索引擎，可是他们为什么同样的内容反复下载啊
我们不需要搜索引擎，有什么办法呢？
--
修改:cheaper2005 FROM 118.244.254.*
FROM 118.244.254.*
看看访问日志。有几种可能：
一是搜索引擎的爬虫，
二是图片等静态资源被搜索引擎抓取后显示在了搜索结果里，被多次命中，或者被其他网站直接引用，
三是暴力扫描
四是DDOS，不过1G流量太小，算不上。
【 在 cheaper2005 的大作中提到: 】
: 网站还没有正式上线，知道的人很少，查看流量，发现每隔5到6天，固定被调用几百次，
: 才生1G左右的流量。
: 有人告诉我是搜索引擎，可是他们为什么同样的内容反复下载啊
: ...................
--
FROM 223.72.80.*
应该是爬虫吧，写sitemap+robot控制爬虫索引啊
【 在 cheaper2005 () 的大作中提到: 】
: 网站还没有正式上线，知道的人很少，查看流量，发现每隔5到6天，固定被调用几百次，
: 才生1G左右的流量。
: 有人告诉我是搜索引擎，可是他们为什么同样的内容反复下载啊
:
--
FROM 114.242.248.*
搜索引擎抓取多少次，可以到看日志确认是那个搜索引擎并从其站长工具上看到抓取频次。
估计是第三方数据爬虫。
【 在 cheaper2005 的大作中提到: 】
: 网站还没有正式上线，知道的人很少，查看流量，发现每隔5到6天，固定被调用几百次，
: 才生1G左右的流量。
: 有人告诉我是搜索引擎，可是他们为什么同样的内容反复下载啊
: ...................
--
FROM 124.207.72.*