我正在使用Scrapy和Splash从启用JavaScript的银行页面爬取促销交易。
https://www.dbs.com.sg/personal/product-promotion-list.page?pct=Cards#
我面临的问题是分页使用JavaScript完成,因此链接格式如下:<a href="#">1</a>
<a href="#">2</a>
<a href="#">3</a>
所有href链接都隐藏在#中。
随着我的深入挖掘,html代码中的分页函数如下:
<script type="text/javascript">
$(document).ready(function(){
productList();
});
$('.pagination').on("click","a",checkClass);
$('#filterSearch').on("click",searchTextChange);
$('form').submit(function(e){
e.preventDefault();
});
$("#Search").keyup(function(event){
if(event.keyCode == 13){
$("#filterSearch").click();
}
});
</script>
有人能帮我吗?任何帮助都将不胜感激!谢谢。