Tag: 爬虫’
feedsky实时统计惊现Larbin爬虫
- by Hector
今天在feedsky里面的实时统计里面看到了下面的一个信息: Larbin爬虫,以前没有听说过,如是到网上好好查了一下:1、larbin的简介 larbin是一种开源的网络爬虫/网络蜘蛛,由法国的年轻人 Sébastien Ailleret总结:互联网是一个庞大的非结构化的数据库,将数据有效的检索并组织
利用feedsky看爬虫何时光临你的网站
- by Hector
广大新站站长应该都想知道百度蜘蛛,google蜘蛛,还有雅虎呀等等何时光临你的网站,可是由于很多原因这个比较难实现,或者比较麻烦。今天逛feedsky的时候发现可以通过feedsky清晰的知道爬虫是否来过你的网站,何时来到你的网站,当然前提是你必须开通了feedsky,而且首页上有feedsky的订阅链接。大家可以在—-feed统计—–实时统计那里可以看到这是我博客的一小段截