那些年的Webview开发经验记录

最新推荐文章于 2024-06-03 17:00:01 发布
最新推荐文章于 2024-06-03 17:00:01 发布
阅读量213 收藏
点赞数
文章标签： webview
本文链接：https://blog.csdn.net/qq_26914291/article/details/132224749
版权

获取网站视频真实链接

直接上工具类

直接调用即可，这个工具类会返回加载的网页中所有的链接，至于对链接怎么处理就是你们自己的事了， 亲测至今我所遇到的所有视频，它都可以捕获到其链接


import android.app.Activity;
import android.graphics.Bitmap;
import android.net.http.SslError;
import android.os.Build;
import android.support.annotation.RequiresApi;
import android.view.ViewGroup;
import android.webkit.CookieManager;
import android.webkit.CookieSyncManager;
import android.webkit.SslErrorHandler;
import android.webkit.WebResourceRequest;
import android.webkit.WebResourceResponse;
import android.webkit.WebSettings;
import android.webkit.WebView;
import android.webkit.WebViewClient;
import android.widget.LinearLayout;

import java.util.Timer;
import java.util.TimerTask;

/**
 * Created by Administrator on 2018/3/22.
 */

public class ParseWebUrlHelper {
    private static ParseWebUrlHelper parseWebUrlHelper;
    private String webUrl;
    private Activity mAct;
    private WebView webView;
    private int timeOut = 20 * 1000;
    private OnParseWebUrlListener onParseListener;

    public static ParseWebUrlHelper getInstance() {
        if (parseWebUrlHelper == null) parseWebUrlHelper = new ParseWebUrlHelper();
        return parseWebUrlHelper;
    }

    public ParseWebUrlHelper init(Activity act, String url) {
        this.mAct = act;
        this.webUrl = url;
        ViewGroup mainView = (ViewGroup) mAct.findViewById(android.R.id.content);
        this.webView = new WebView(mAct);
        this.webView.setLayoutParams(new LinearLayout.LayoutParams(1, 1));
        mainView.addView(this.webView);
        initWebSettings();
        return this;
    }

    private void initWebSettings() {
        WebView mWebView = this.webView;
        mWebView.clearFocus();
        WebSettings mWebSettings = mWebView.getSettings();
        mWebSettings.setJavaScriptEnabled(true);
        mWebSettings.setDefaultTextEncodingName("utf-8");
        mWebSettings.setCacheMode(WebSettings.LOAD_DEFAULT);
        mWebSettings.setPluginState(WebSettings.PluginState.ON);
        mWebSettings.setDisplayZoomControls(false);
        mWebSettings.setUseWideViewPort(true);
        mWebSettings.setAllowFileAccess(true);
        mWebSettings.setAllowContentAccess(true);
        mWebSettings.setSupportZoom(true);
        mWebSettings.setAllowContentAccess(true);
        mWebSettings.setLoadWithOverviewMode(true);
        mWebSettings.setBuiltInZoomControls(true);// 隐藏缩放按钮
        mWebSettings.setUseWideViewPort(true);// 可任意比例缩放
        mWebSettings.setLoadWithOverviewMode(true);// setUseWideViewPort方法设置webview推荐使用的窗口。setLoadWithOverviewMode方法是设置webview加载的页面的模式。
        mWebSettings.setSavePassword(true);
        mWebSettings.setSaveFormData(true);// 保存表单数据
        mWebSettings.setJavaScriptEnabled(true);
        mWebSettings.setTextZoom(100);
        mWebSettings.setDomStorageEnabled(true);
        mWebSettings.setSupportMultipleWindows(true);// 新加//我就是没有这一行，死活不出来。MD，硬是没有人写这一句！
        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.LOLLIPOP) {
            mWebSettings.setMixedContentMode(WebSettings.MIXED_CONTENT_ALWAYS_ALLOW);
        }
        if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.JELLY_BEAN_MR1) {
            mWebSettings.setMediaPlaybackRequiresUserGesture(true);
        }
        if (Build.VERSION.SDK_INT >= 16) {
            mWebSettings.setAllowFileAccessFromFileURLs(true);
            mWebSettings.setAllowUniversalAccessFromFileURLs(true);
        }
        mWebSettings.setJavaScriptCanOpenWindowsAutomatically(true);
        mWebSettings.setLoadsImagesAutomatically(true);
        mWebSettings.setAppCacheEnabled(true);
        mWebSettings.setAppCachePath(mAct.getCacheDir().getAbsolutePath());
        mWebSettings.setDatabaseEnabled(true);
        mWebSettings.setGeolocationDatabasePath(mAct.getDir("database", 0).getPath());
        mWebSettings.setGeolocationEnabled(true);
        CookieManager instance = CookieManager.getInstance();
        if (Build.VERSION.SDK_INT < 21) {
            CookieSyncManager.createInstance(mAct.getApplicationContext());
        }
        instance.setAcceptCookie(true);
        if (Build.VERSION.SDK_INT >= 21) {
            instance.setAcceptThirdPartyCookies(mWebView, true);
        }
        mWebView.setWebViewClient(new MyWebViewClient());
        enabledCookie(webView);//启用cookie
    }
    public ParseWebUrlHelper setLoadUrl(String url){
        this.webUrl=url;
        return this;
    }
    public ParseWebUrlHelper startParse(){
        webView.loadUrl(this.webUrl);
        return this;
    }
    /*启用cookie*/
    private void enabledCookie(WebView web) {
        CookieManager instance = CookieManager.getInstance();
        if (Build.VERSION.SDK_INT < 21) {
            CookieSyncManager.createInstance(mAct);
        }
        instance.setAcceptCookie(true);
        if (Build.VERSION.SDK_INT >= 21) {
            instance.setAcceptThirdPartyCookies(web, true);
        }
    }

    public ParseWebUrlHelper setOnParseListener(OnParseWebUrlListener onParseListener) {
        this.onParseListener = onParseListener;
        return this;
    }

    private class MyWebViewClient extends WebViewClient {

        @RequiresApi(api = Build.VERSION_CODES.LOLLIPOP)
        @Override
        public boolean shouldOverrideUrlLoading(WebView view, WebResourceRequest request) {
            if(request.getUrl().toString().startsWith("intent")||request.getUrl().toString().startsWith("youku")){
                return true;
            }else{
                return super.shouldOverrideUrlLoading(view, request);
            }
        }

        @Override
        public boolean shouldOverrideUrlLoading(WebView view, String url) {
            if(url.startsWith("intent")||url.startsWith("youku")){
                return true;
            }else{
                return super.shouldOverrideUrlLoading(view, url);
            }
        }

        /*解决ssl证书问题*/
        @Override
        public void onReceivedSslError(WebView view, SslErrorHandler handler, SslError error) {
            handler.proceed();
        }

        @Override
        public WebResourceResponse shouldInterceptRequest(WebView view, String url) {
            onParseListener.onFindUrl(url);
            return super.shouldInterceptRequest(view, url);
        }

        @Override
        public WebResourceResponse shouldInterceptRequest(WebView view, WebResourceRequest request) {
            if (Build.VERSION.SDK_INT >= Build.VERSION_CODES.LOLLIPOP) {
                String url = request.getUrl().toString();
                onParseListener.onFindUrl(url);
            }
            return super.shouldInterceptRequest(view, request);
        }

        @Override
        public void onPageStarted(WebView view, String url, Bitmap favicon) {
            // TODO: Implement this method
            super.onPageStarted(view, url, favicon);
            startConut();//加载超时处理
        }

    }
    /*解决webview加载超时问题*/
   private void startConut(){
        final Timer timer=new Timer();
        TimerTask timerTask=new TimerTask(){
            @Override
            public void run()
            {
                onParseListener.onError("解析视频超时，请检查网速或网络是否出现问题...");
                timer.cancel();
                timer.purge();
            }
        };
        timer.schedule(timerTask,timeOut,1);
    }

    public interface OnParseWebUrlListener {
        void onFindUrl(String url);
        void onError(String errorMsg);
    }
}

调用

//初始化
this.parseWebUrlHelper=ParseWebUrlHelper.getInstance().init(this.mAct,"");
//解析网页中视频
parseWebUrlHelper.setOnParseListener(new ParseWebUrlHelper.OnParseWebUrlListener() {
                    @Override
                    public void onFindUrl(String url) {
                        Log.d("webUrl",url);
                        //*****处理代码
                    }
                    @Override
                    public void onError(String errorMsg) {
                    //****出错监听
                    }

问题

Q:webview某些视频加载不出来问题
A:http://blog.csdn.net/u013148839/article/details/65448474
Q:webview拦截请求
A:https://segmentfault.com/a/1190000006805635
Q:webview由于证书问题导致不能正常加载网页问题:
A:http://blog.csdn.net/sd19871122/article/details/54632199

他人总结

1.http://www.cnblogs.com/lee0oo0/p/4026774.html

获取webview完整源码[包括iframe源码]

主要问题

动态加载
iframe嵌套

0.window也算一个frame
1.得到frame
2.判断frame的url是否已被查找
3.判断frame是否是同域名
4.同域名直接正常查找
5.不同域名直接单独加载frame的url，当成一个新的页面处理
6.一直查找直到发现一个video标签

iframe链接单独打开被检测到问题

次要问题

去除Chrome反调试
无限断点反调试

参考：https://blog.csdn.net/zzgzzg00/article/details/79504827

完结

编程这种事真是太容易跑偏了，我明明最根本的目的就是为了获取网站视频链接的，然后发现有些网站的源码获取不全，然后目的就悄然变成了去获取源码，然后折腾了几天依然没解决这个获取源码的问题，然后猛然记起以前研究过相同的问题，并且还写了一篇获取视频链接的文章，这才是真正的造轮子吧，明明已经研究过一次了，相同的问题明明已经遇到过一次了，为何这次又掉坑里了？而且掉坑里几天了，居然没意识过来，唉，笨啊，真实不长记性啊，到了最后才发现我获取源码的目的就是为了获取视频链接，说来还是我以前写的这篇文章发挥了作用：Web逆向之通过Android中WebView获取网站视频真实链接

参考

1.攻破iframe围城
2.Python爬虫关于多层嵌套iframe的解决
3.爬虫获取：解决动态加载数据和frame框架问题
4.java爬虫进阶 —— ip池使用，iframe嵌套，异步访问破解

jitcor
关注
一次安卓WebView套壳应用开发记录
jimson_zhu的博客
02-10 1967
一次安卓WebView套壳应用开发记录。
Android WebView 应用界面开发教程
09-01
在Android应用开发中，WebView是一个非常重要的组件，它允许开发者在应用程序内部展示网页内容，无需启动外部浏览器。WebView实质上是一个内置的轻量级浏览器引擎，使得开发者能够将Web技术与原生Android应用无缝...
VSCode Webview 插件开发的模板的踩坑记录
CRPER
04-15 1513
上周写了个 vscode 的小插件后，突然想整个 webview 的插件。于是乎开始搜罗相关的资料，开搞！这里记录下几个踩过的坑。
WebView开发详解
飞奔的小付的博客
01-11 1837
目录 一.前言 现在很多app并不是纯原生开发，而是会嵌套网页，比如一些经常会变动的页面往往会采用嵌套h5网页的形式展现。Android中就有一个专门用来加载html网页的组件，这个组件就是Webview。 二.概述 Webview是Android开发中常见的控件，内部实现是采用渲染引擎来展示内容，Android4.4以前采用Webkit渲染引擎，4.4版本及
手机app开发可选技术——webview
manerzi的博客
10-31 2172
手机app开发可选技术——webview
Android WebView 开发详解(一)
珠穆朗玛小王子的博客
04-13 689
前言WebView我们都使用过，但是怎么说呢，大部分人应该都是赶鸭子上架，例如像我这样的，需要用的时候就去查一下相关api，毕竟做原生app开发，webView用的确实不多，今天突然发现了这一点，觉得应该弥补一下这方面的不足，在网上看了一位博主分享之前分享的WebView介绍，非常细节，非常棒，必须要让更多的人看到。复制过来的排版可能有些问题，可以直接去看原文。正文转载请注明出处 http://b
vsCode插件开发_07webView
everglow__的博客
06-03 783
vsCode插件开发记录，本文主要记录了webView的开发内容
android引用X5内核webview部分问题记录
秃头还奋进的博客
08-01 1684
x5内核初始化 报110，或者加载失败需要第二次进入才成功，scrollview嵌套后webview的高度不可控。留有大片空白
android webview setdefaultzoom,Android WebView 开发中遇到的那些事儿
weixin_34122028的博客
05-28 679
前言：WebView是Android里比较特殊的一个控件，是Android混合开发(原生开发+web开发)的基础。笔者目前开发的项目，用到WebView地方还是比较多的，遇到了不少坑，为了避免遇到类似的问题，今天在这里针对webView做一篇系统的归纳总结，希望对别人能有帮助。WebView是基于webkit引擎、展现web页面的控件，在低版本和高版本采用了不同的webkit版本内核，4.4后直接...
那些年在WebView上踩过的坑
热门推荐
一个码农的博客
11-29 1万+
之前我在Android中使用WebView与JS交互全解析一文中，介绍了通过Webview和JS的交互方式，但Webview这个控件简直是让人又爱又恨，各种你想不到的错误在各种奇怪的手机上，各种不一样的版本里，所以我想通过这篇博客总结Webview开发中的不得不注意的一些坑。1.WebView的内存泄露问题 问题描述： webview内存泄露的情况还是很严重的，尤其是当你加载的页面比较庞大的时候
webview 开发详解（一）
12-10 722
1.在要Activity中实例化WebView组件：WebView webView = new WebView(this); 2.调用WebView的loadUrl()方法，设置WevView要显示的网页：   互联网用：webView.loadUrl("http://www.google.com");    本地文件用：webView.loadUrl("file:///androi
小程序开发 - webview
03-29
这里记录一下，希望将来小程序能放开更多限制。 申请业务域名 首先必须在小程序后台配置业务域名，并且是已经备案过的。 微信授权登录 当需要微信授权登录的H5页面直接通过小程序webview访问时，会报错。 解决方案...
解决 Hbuilder打包 Apk pad 无法横屏 以及 H5 直接打包 成Apk
一码归一码@
12-18 6486
下面是创建app 项目 wap站首页地址 可以配置 你H5的登录页 也可以是 你的index 页面 然后 会有一些 配置 你可以去百度 manifest.json 这个 配置文件 配置一下 就可以了 很方便 打包后直接 可以安装 到手机上。如果 你有自己的H5 也可以 自己去创建一个空壳 只需要 加上你 H5的请求地址 就可以了。当然 你的 H5前提是做了 自适应 不然 样式会很丑的。下面是manifest.json 配置文件。
基于 python 实现的ios混淆脚本工具
10-01
【作品名称】：基于 python 实现的ios混淆脚本工具 【适用人群】：适用于希望学习不同技术领域的小白或进阶学习者。可作为毕设项目、课程设计、大作业、工程实训或初期项目立项。 【项目介绍】： . addNative.py 生成oc垃圾代码工具 此脚本会扫描指定目录，给OC文件添加垃圾函数，同时创建垃圾文件到/trash目录。 参数说明 --oc_folder OC_FOLDER OC_FOLDER为OC代码所在目录 --replace替换OC_FOLDER下的原文件，同时原代码会备份到脚本目录下的backup_ios目录。不指定此项垃圾代码只会放到脚本目录下的target_ios/ addNative.py里还有一些配置可以看需求手动修改，如生成垃圾文件的数量，垃圾函数的数量，忽略文件列表等，具体请查看代码顶部相关注释 renameNative.py 修改类名前缀工具 类名是引用可能较为复杂 【资源声明】：本资源作为“参考资料”而不是“定制需求”，代码只能作为参考，不能完全复制照搬。需要有一定的基础能够看懂代码，能够自行调试代码并解决报错，能够自行添加功能修改代码。
基于SOM算法对IRIS数据集分类_Learning-Som_IrisClassification.zip
10-01
基于SOM算法对IRIS数据集分类_Learning-Som_IrisClassification
06_摄影展示小程序.zip
最新发布
10-01
我们的小程序源码功能多样，涵盖社交、电商等领域。高度定制化，轻松打造专属风格。用户体验佳，界面美观操作便捷。安全可靠，保障数据与运行稳定。适合创业者、企业和开发者。提供技术支持与文档说明。快来下载，开启精彩之旅！
大学生创业计划书××信息技术公司商业计划书
10-01
大学生创业计划书××信息技术公司商业计划书
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

jitcor

觉得有用，不赏点？

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值