侯体宗的博客
  • 首页
  • Hyperf版
  • beego仿版
  • 人生(杂谈)
  • 技术
  • 关于我
  • 更多分类
    • 文件下载
    • 文字修仙
    • 中国象棋ai
    • 群聊
    • 九宫格抽奖
    • 拼图
    • 消消乐
    • 相册

PHP CURL采集百度搜寻结果图片不显示问题的解决方法

php  /  管理员 发布于 4年前   277

1.根据关键字采集百度搜寻结果

根据关键字采集百度搜寻结果,可以使用curl实现,代码如下:

输出后发现有部分图片不能显示

 

2.采集后的图片不显示原因分析

直接在百度中搜寻,页面是可以显示图片的。使用firebug查看图片路径,发现采集的图片域名与在百度搜寻的图片域名不同。

采集返回的图片域名 t11.baidu.com

 

正常搜寻的图片域名 ss1.baidu.com

 

查看采集与正常搜寻的html,发现有个域名转换的js是不一样的

采集

var list = {    "graph.baidu.com": "http://graph.baidu.com",    "t1.baidu.com":"http://t1.baidu.com",    "t2.baidu.com":"http://t2.baidu.com",    "t3.baidu.com":"http://t3.baidu.com",    "t10.baidu.com":"http://t10.baidu.com",    "t11.baidu.com":"http://t11.baidu.com",    "t12.baidu.com":"http://t12.baidu.com",    "i7.baidu.com":"http://i7.baidu.com",    "i8.baidu.com":"http://i8.baidu.com",    "i9.baidu.com":"http://i9.baidu.com",};

正常搜寻

var list = {    "graph.baidu.com": "https://sp0.baidu.com/-aYHfD0a2gU2pMbgoY3K",    "t1.baidu.com":"https://ss0.baidu.com/6ON1bjeh1BF3odCf",    "t2.baidu.com":"https://ss1.baidu.com/6OZ1bjeh1BF3odCf",    "t3.baidu.com":"https://ss2.baidu.com/6OV1bjeh1BF3odCf",    "t10.baidu.com":"https://ss0.baidu.com/6ONWsjip0QIZ8tyhnq",    "t11.baidu.com":"https://ss1.baidu.com/6ONXsjip0QIZ8tyhnq",    "t12.baidu.com":"https://ss2.baidu.com/6ONYsjip0QIZ8tyhnq",    "i7.baidu.com":"https://ss0.baidu.com/73F1bjeh1BF3odCf",    "i8.baidu.com":"https://ss0.baidu.com/73x1bjeh1BF3odCf",    "i9.baidu.com":"https://ss0.baidu.com/73t1bjeh1BF3odCf",};

因此可以断定是,百度根据来源地址、IP、header等参数,判断如果是采集的,则返回不同的js。

3.采集后图片不显示的解决方法

把采集到的html,根据定义的域名做一次批量转换即可。

$v){    $str = str_replace($k, $v, $str);  }  return $str;}$wd = '仙剑奇侠传';$url = 'http://www.baidu.com/s?wd='.urlencode($wd);$data = array();$header = array();$response = doCurl($url, $data, $header, 5);echo cdomain($response); // 调用域名转换?>

增加域名转换后,所有的图片都可以正常显示。

以上所述是小编给大家介绍的PHP CURL采集百度搜寻结果图片不显示问题的解决方法,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对站的支持!

您可能感兴趣的文章:

  • 用php实现百度网盘图片直链的代码分享
  • PHP通过CURL实现定时任务的图片抓取功能示例
  • php利用curl获取远程图片实现方法
  • php+curl 发送图片处理代码分享
  • php获取远程图片的两种 CURL方式和sockets方式获取远程图片


  • 上一条:
    php集成安装包wampserver修改密码后phpmyadmin无法登陆的解决方法 原创
    下一条:
    如何解决phpmyadmin导入数据库文件最大限制2048KB
  • 昵称:

    邮箱:

    0条评论 (评论内容有缓存机制,请悉知!)
    最新最热
    • 分类目录
    • 人生(杂谈)
    • 技术
    • linux
    • Java
    • php
    • 框架(架构)
    • 前端
    • ThinkPHP
    • 数据库
    • 微信(小程序)
    • Laravel
    • Redis
    • Docker
    • Go
    • swoole
    • Windows
    • Python
    • 苹果(mac/ios)
    • 相关文章
    • Laravel从Accel获得5700万美元A轮融资(0个评论)
    • PHP 8.4 Alpha 1现已发布!(0个评论)
    • 用Time Warden监控PHP中的代码处理时间(0个评论)
    • 在PHP中使用array_pop + yield实现读取超大型目录功能示例(0个评论)
    • Property Hooks RFC在PHP 8.4中越来越接近现实(0个评论)
    • 近期文章
    • 在go语言中使用api.geonames.org接口实现根据国际邮政编码获取地址信息功能(1个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf分页文件功能(0个评论)
    • gmail发邮件报错:534 5.7.9 Application-specific password required...解决方案(0个评论)
    • 欧盟关于强迫劳动的规定的官方举报渠道及官方举报网站(0个评论)
    • 在go语言中使用github.com/signintech/gopdf实现生成pdf文件功能(0个评论)
    • Laravel从Accel获得5700万美元A轮融资(0个评论)
    • 在go + gin中gorm实现指定搜索/区间搜索分页列表功能接口实例(0个评论)
    • 在go语言中实现IP/CIDR的ip和netmask互转及IP段形式互转及ip是否存在IP/CIDR(0个评论)
    • PHP 8.4 Alpha 1现已发布!(0个评论)
    • Laravel 11.15版本发布 - Eloquent Builder中添加的泛型(0个评论)
    • 近期评论
    • 122 在

      学历:一种延缓就业设计,生活需求下的权衡之选中评论 工作几年后,报名考研了,到现在还没认真学习备考,迷茫中。作为一名北漂互联网打工人..
    • 123 在

      Clash for Windows作者删库跑路了,github已404中评论 按理说只要你在国内,所有的流量进出都在监控范围内,不管你怎么隐藏也没用,想搞你分..
    • 原梓番博客 在

      在Laravel框架中使用模型Model分表最简单的方法中评论 好久好久都没看友情链接申请了,今天刚看,已经添加。..
    • 博主 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 @1111老铁这个不行了,可以看看近期评论的其他文章..
    • 1111 在

      佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 网站不能打开,博主百忙中能否发个APP下载链接,佛跳墙或极光..
    • 2016-10
    • 2016-11
    • 2017-06
    • 2017-07
    • 2017-08
    • 2017-09
    • 2017-11
    • 2017-12
    • 2018-01
    • 2018-02
    • 2018-03
    • 2020-03
    • 2020-04
    • 2020-05
    • 2020-06
    • 2020-07
    • 2020-09
    • 2021-02
    • 2021-03
    • 2021-04
    • 2021-05
    • 2021-06
    • 2021-07
    • 2021-08
    • 2021-09
    • 2021-10
    • 2021-11
    • 2021-12
    • 2022-01
    • 2022-02
    • 2022-05
    • 2022-06
    • 2022-07
    • 2022-08
    • 2022-09
    • 2022-10
    • 2022-11
    • 2022-12
    • 2023-01
    • 2023-02
    • 2023-03
    • 2023-04
    • 2023-05
    • 2023-06
    • 2023-07
    • 2023-08
    • 2023-09
    • 2023-10
    • 2023-11
    • 2023-12
    • 2024-01
    • 2024-02
    • 2024-03
    • 2024-04
    • 2024-05
    • 2024-06
    • 2024-07
    • 2024-09
    Top

    Copyright·© 2019 侯体宗版权所有· 粤ICP备20027696号 PHP交流群

    侯体宗的博客