我想爬虫爬取特定的标题的bug,我想模拟禅道自带的自定义搜索功能来获取其页面,然后再提取其页面中的信息(python爬虫)

2017-08-28 15:36:55
小明
  • 访问次数: 2
  • 注册日期: 2017-08-28
  • 最后登录: 2017-08-28
  • 我的积分: 60
  • 门派等级: 无门派
沙发
2017-08-28 15:39:15
小明
  • 访问次数: 2
  • 注册日期: 2017-08-28
  • 最后登录: 2017-08-28
  • 我的积分: 60
  • 门派等级: 无门派
刷新一次网页,产生了3个http请求,请求之间都是相互依赖的,求大神指点迷津
板凳
2017-08-28 18:31:25
石洋洋
  • 访问次数: 6461
  • 注册日期: 2011-04-06
  • 最后登录: 2024-04-19
  • 我的积分: 96502
  • 门派等级: 幽灵 等级6 修罗
禅道中的搜索条件是记录在session中的,建议直接连接mysql库直接查询相应的数据。
#3
2020-09-18 09:44:40
廖荣玄
  • 访问次数: 5
  • 注册日期: 2020-09-18
  • 最后登录: 2021-04-25
  • 我的积分: 78
  • 门派等级: 无门派
你好,我最近也在做这个功能,请问你解决了没有?
#4
2020-09-22 13:47:56
石洋洋
  • 访问次数: 6461
  • 注册日期: 2011-04-06
  • 最后登录: 2024-04-19
  • 我的积分: 96502
  • 门派等级: 幽灵 等级6 修罗
@ 廖荣玄:没有session是模拟不了的。
#5
2020-09-24 17:13:15 回复#4
廖荣玄
  • 访问次数: 5
  • 注册日期: 2020-09-18
  • 最后登录: 2021-04-25
  • 我的积分: 78
  • 门派等级: 无门派
原帖由 石洋洋 于 2020-09-22 13:47:56 发表

@ 廖荣玄:没有session是模拟不了的。

那我如果用session,session不进行重新更换,就每次结果都会一致么? 

那您这边知道python有什么更换session的方式么?或者说清楚之前session中的内容

#6
2020-09-24 17:40:39 回复#5
王林
  • 访问次数: 4377
  • 注册日期: 2017-06-20
  • 最后登录: 2024-04-08
  • 我的积分: 20113
  • 门派等级: 无门派

是的,session一样的话结果是一样的。

python这块我们没有用过不太熟悉,可能帮不太上什么忙,需要您再研究一下了。

建议您可以试试直接通过mysql进行搜索获取数据呢

1/1 1