免维护网易新闻采集(小偷)程序
这几天在和朋友搞些小东西,就是采用火车头对一些网站的信息进行采集,但百度的收录量一直只得首页。
于是上网搜索有没有一些小偷采集程序会对收录有帮助的,然后看到有人放出了一个月百度收录过20万的一些程序,但基本上都是付费的,或者被混淆加密的,而且真确性没有办法考究,于是就决定自己动手模仿一套,耗时大概是18个小时吧。
那么就介绍一下这套程序吧
- 无人守值,自动采集网易滚动新闻。 囊括娱乐、体育、财经、科技、女人、汽车、读书、房产、旅游、教育、公益、校园等新闻分类。
- 自动优化采集的内容,最大限度注重阅读性,由于网易新闻内容页的样式实在太多,这个只能尽量做,不能百分百保证每个页面都整齐美观。
- 整套程序小巧,压缩后只有16kb,无数据库,上传到支持php的虚拟主机,绑定好域名后马上可以使用。
- 设定游客访问时自动提交链接到百度,优化robots.txt,sitemap使收录更加友好。
- 预留ad.php,footer.php,方便用户自己添加广告代码和统计代码,友情链接。
- 网站基本信息在config.php,方便统一配置。
- html5编写,响应式结构。
TAG CLOUD
碎碎念 生活 戏曲 古风 电影 工作 网摘 动漫 wordpress asp 模版技术 静态化 编程 风华网 php 生病 优化 seo 模板 destoon