美文网首页
前嗅ForeSpider脚本教程-频道脚本:脚本采集数据

前嗅ForeSpider脚本教程-频道脚本:脚本采集数据

作者: 前嗅大数据 | 来源:发表于2019-04-08 11:51 被阅读0次

今天,小编给大家带来的教程为:前嗅ForeSpider脚本教程中频道脚本,脚本采集数据的实战教程。具体内容如下:

一.场景

此处为高手操作,配置的频道脚本接管所有采集流程,无需再做任何配置。

二.示例

获取下图商品的评论。

三.脚本实例

vargdoc = EXTRACT.OpenDoc(this,"http://product.dangdang.com/index.php?r=comment%2Flist&productId=26315044&categoryPath=01.05.12.00.00.00&mainProductId=26315044&mediumId=0&pageIndex=1&sortType=1&filterType=1&isSystem=1&tagId=0&tagFilterCount=0&template=publish",0);

if(gdoc){ 

 jScript js; 

 record rec; 

 dom d;

varjsonStr = gdoc.GetDom().GetSource().ToStr();

varjson = js.RunJson(d.UnEscape(jsonStr));

vardomm = OpenDom(json.data.list.html);vardiv = domm.FindClass("item_wrap");

varitemCom = div.Child;while(itemCom){      

record re;

re.hk =1;

re.content = domm.FindClass("describe_detail","div",itemCom);

RESULT.AddRec(re,1);     

 itemCom = itemCom.next;            

  } 

 EXTRACT.CloseDoc(gdoc);      

 }

相关文章

网友评论

      本文标题:前嗅ForeSpider脚本教程-频道脚本:脚本采集数据

      本文链接:https://www.haomeiwen.com/subject/xgduiqtx.html