请教大家一个问题,我在使用curl获取一个页面的时候,却总是返回当前网址,例如:https://xxxxx/date.php,刷新后却返回 https://xxxxx/ 这个地址了。这个问题是目标网站做了防爬设置了吗?还是我的header配置错误呢?谢谢大家了。
目标网址 https://music.163.com/#/song?id=167876
热议
2楼 yyy.sg 2021-9-16 14:25:27
打码啊重要信息,我登上了已经
谢谢,我看看
4楼 榆木 2021-9-16 14:36:00
因为啥呢 因为网易云是动态加载的 加载的实际是https://music.163.com/song?id=167876 这个
有# URL就被阻断了 所以你上面访问的还是 https://music.163.com/
5楼 唐王李世民 2021-9-16 14:37:06
因为啥呢 因为网易云是动态加载的 加载的实际是https://music.163.com/song?id=167876 这个
有# URL就被 ...
需要怎么修改呢?谢谢您了
6楼 yyy.sg 2021-9-16 14:37:48
因为啥呢 因为网易云是动态加载的 加载的实际是https://music.163.com/song?id=167876 这个
有# URL就被 ...
可能真的是因为#这个特殊符号阻断了,但是不知道如何来改变
8楼 唐王李世民 5小时前
还是不知道如何解决!
9楼 鞠婧祎 4小时前
你访问api还差不多,这个是动态加载的,并不是服务端渲染的,你访问这个地址没有用
10楼 唐王李世民 4小时前
你访问api还差不多,这个是动态加载的,并不是服务端渲染的,你访问这个地址没有用 ...
我只是想抓取这个页面的内容,但总是不成功
12楼 唐王李世民 3小时前
直接抓取跳转后的不行呢?https://y.music.163.com/m/song?id=167876
它跳转后会跳到PHP文件地址的首页
例如 https://xxxxxxx.com/test.php 这个文件来抓取,它会跳转到 https://xxxxxxx.com/
13楼 鞠婧祎 5分钟前
它跳转后会跳到PHP文件地址的首页
例如 https://xxxxxxx.com/test.php 这个文件来抓取,它会跳转到 https ...
你curl https://music.163.com/song?id=167876然后加个百度蜘蛛的useragent
申明:本文内容由网友收集分享,仅供学习参考使用。如文中内容侵犯到您的利益,请在文章下方留言,本站会第一时间进行处理。
