美文网首页
ios-WkWebView用加载HTML字符串的方式过滤网页节点

ios-WkWebView用加载HTML字符串的方式过滤网页节点

作者: 噢啦噢啦噢啦噢啦噢啦 | 来源:发表于2017-03-15 02:21 被阅读0次

    项目地址在文章最后
    在做一个项目,需要对网站做解析,就是把网页的不需要的部分去除。比如广告啊,导航栏,登陆栏之类的。一般的做法就是

    NSURL *url = [NSURL URLWithString:_link];
    [_webView loadRequest:[NSURLRequest requestWithURL:url]];
    

    然后,在- (void)webView:(WKWebView *)webView didFinishNavigation:(WKNavigation *)navigation这个函数内用js把想要去掉的节点删掉。那么问题来了,webview加载网页时是把已经加载好的内容先显示出来,再继续加载,直到所有的内容都加载好了,- (void)webView:(WKWebView *)webView didFinishNavigation:(WKNavigation *)navigation这个函数才会调用。所以你会看到一个完整的网页,再一闪,才是你想要的网页。当然你也可以先隐藏网页,等完成后再显示。那么问题又来了,如果这个网页要等很久才完成呢?刚好我的网页竟然要等5分钟才能完成,实在受不了。后来我想到先把html给弄来,对html进行处理后再加载,发现这样只要3,4秒。我的做法是

    dispatch_async(dispatch_get_global_queue(DISPATCH_QUEUE_PRIORITY_DEFAULT, 0), ^{
            _htmlString = [NSString stringWithContentsOfURL:_URLs[_index] encoding:NSUTF8StringEncoding error:nil];
            if(_htmlString == nil || _htmlString.length == 0){
                NSLog(@"load failed!");
            }else{
                _htmlString = [self filterHtmlString:_htmlString];
                [_webView loadHTMLString:_htmlString baseURL:_URLs[_index]];
            }
        });
    

    [_webView loadHTMLString:_htmlString baseURL:[NSURL URLWithString:_link]];这句话的baseURL不能为空,不然网页就没有背景啊,颜色那些资源。
    我们对这个网站来处理一下
    http://elderscrollsonline.wiki.fextralife.com
    先去掉登录注册那部分,通过元素检查,


    如果你熟悉NSScanner,那就十分简单
    - (NSString *)filterHtmlString:(NSString *)htmlString{
        NSScanner *theScanner;
        NSString *text = nil;
        theScanner = [NSScanner scannerWithString:htmlString];
        [theScanner scanUpToString:@"<div id=\"fex-account\">" intoString:NULL];
        [theScanner scanUpToString:@"</form>" intoString:&text];
        htmlString = [htmlString stringByReplacingOccurrencesOfString:text withString:@""];
        return htmlString;
    }
    

    text就是<div id="fex-account">···</div>那部分,替换成空字符,这样顶部的登录注册就没有了,几秒的事情。


    这里只是做了个简单的示范,你可以删除任何你看不顺眼的。
    但是还是有问题,webview原来的前进后退功能就失去了,而且当你点击了当前页面的一个链接,新的页面依然是用loadRequest:[NSURLRequest requestWithURL:url]的方式加载,又回到了原点。解决这两个问题也就是说你要自己封装一个webViewController。
    首先要一个数组保存网址列表和一个下标
    _link = @"http://elderscrollsonline.wiki.fextralife.com";
    _URLs = [NSMutableArray arrayWithObject:[NSURL URLWithString:_link]];
    _index = 0;
    

    下面是导航栏的点击事件

    -(void)click:(UIButton *)Btn{
        switch (Btn.tag) {
            case 1:{
                //刷新
                [_webView loadHTMLString:_htmlString baseURL:_URLs[_index]];
            }
                break;
            case 0:{
                //后退
                if(_index > 0){
                    dispatch_async(dispatch_get_global_queue(DISPATCH_QUEUE_PRIORITY_DEFAULT, 0), ^{
                        _htmlString = [NSString stringWithContentsOfURL:_URLs[_index - 1] encoding:NSUTF8StringEncoding error:nil];
                        if(_htmlString == nil || _htmlString.length == 0){
                            NSLog(@"load failed!");
                        }else{
                            _index--;
                            _htmlString = [self filterHtmlString:_htmlString];
                            [_webView loadHTMLString:_htmlString baseURL:_URLs[_index]];
                        }
                    });
                }else{
                    [self.navigationController popViewControllerAnimated:YES];
                }
            }
                break;
            case 2:{
                //前进
                if(_index < _URLs.count - 1){
                    dispatch_async(dispatch_get_global_queue(DISPATCH_QUEUE_PRIORITY_DEFAULT, 0), ^{
                        _htmlString = [NSString stringWithContentsOfURL:_URLs[_index + 1] encoding:NSUTF8StringEncoding error:nil];
                        if(_htmlString == nil || _htmlString.length == 0){
                            NSLog(@"load failed!");
                        }else{
                            _index++;
                            _htmlString = [self filterHtmlString:_htmlString];
                            [_webView loadHTMLString:_htmlString baseURL:_URLs[_index]];
                        }
                    });
                }
            }
                break;
            default:
                break;
        }
    }
    

    最后实现WkWebView的NavigationDelegate,使用我们的方法来加载网页。
    - (void)webView:(WKWebView *)webView decidePolicyForNavigationAction:(WKNavigationAction *)navigationAction decisionHandler:(void (^)(WKNavigationActionPolicy))decisionHandler;
    在发送请求之前,决定是否跳转。这里也可以拦截你不想要的请求。这里的_statu是一个枚举类型,如果当前的下标是最后一个而且你点击了一个链接,就是在数组后面添加新的网址。如果下表在中间,就要把后面的删掉,再添加。

    - (void)webView:(WKWebView *)webView decidePolicyForNavigationAction:(WKNavigationAction *)navigationAction decisionHandler:(void (^)(WKNavigationActionPolicy))decisionHandler{
        NSString *URLString = navigationAction.request.URL.absoluteString;
        NSLog(@"监测到的WKWebView上的请求 %@",URLString);
        
        WKNavigationActionPolicy actionPolicy;
        if([URLString hasPrefix:_link]){
            actionPolicy = WKNavigationActionPolicyAllow;
            if(_index == _URLs.count - 1){
                _statu = Add;//新增
            }else{
                _statu = Switch;//替换
            }
        }else{
            actionPolicy = WKNavigationActionPolicyCancel;
        }
        
        // 这句是必须加上的,不然会异常
        decisionHandler(actionPolicy);
    }
    

    - (void)webView:(WKWebView *)webView decidePolicyForNavigationResponse:(WKNavigationResponse *)navigationResponse decisionHandler:(void (^)(WKNavigationResponsePolicy))decisionHandler;
    在收到响应后,决定是否跳转。这里我们把所有的响应统统拒绝,换成我们的方法loadHTMLString

    - (void)webView:(WKWebView *)webView decidePolicyForNavigationResponse:(WKNavigationResponse *)navigationResponse decisionHandler:(void (^)(WKNavigationResponsePolicy))decisionHandler{
        NSURL *URL = navigationResponse.response.URL;
        NSLog(@"响应头url->%@", URL.absoluteString);
        
        WKNavigationResponsePolicy responsePolicy = WKNavigationResponsePolicyCancel;
        // 这句是必须加上的,不然会异常
        decisionHandler(responsePolicy);
        
        if([URL.absoluteString hasPrefix:_link]){
            dispatch_async(dispatch_get_global_queue(DISPATCH_QUEUE_PRIORITY_DEFAULT, 0), ^{
                _htmlString = [NSString stringWithContentsOfURL:URL encoding:NSUTF8StringEncoding error:nil];
                if(_htmlString == nil || _htmlString.length == 0){
                    NSLog(@"load failed!");
                }else{
                    _index++;
                    if(_statu == Switch){
                        NSMutableIndexSet *set = [[NSMutableIndexSet alloc]init];
                        for(NSUInteger i = _index; i < _URLs.count; i++){
                            [set addIndex:i];
                        }
                        [_URLs removeObjectsAtIndexes:set];
                    }
                    [_URLs addObject:URL];
                    _htmlString = [self filterHtmlString:_htmlString];
                    [_webView loadHTMLString:_htmlString baseURL:_URLs[_index]];
                }
            });
        }
    }
    

    这样就大功告成了。使用一段时间后虽然还没有发现什么问题,但就是感觉不踏实啊。如果有哪里做得不好的欢迎大家指出讨论。
    完整的项目已放在Github上:https://github.com/FQQA/iOS

    相关文章

      网友评论

          本文标题:ios-WkWebView用加载HTML字符串的方式过滤网页节点

          本文链接:https://www.haomeiwen.com/subject/etvknttx.html