github:https://github.com/xingag/app_spider/tree/master/%E6%8A%96%E9%9F%B3-%E8%87%AA%E5%8A%A8%E5%88%B7%E6%8A%96%E9%9F%B3
具体的实现思路是:无障碍服务 AccessibilityService 负责抖音 App 的 UI 自动化操作,Jsoup 负责爬取抖音视频的基本信息,包含每条视频的时长,最后保证每一条视频播放完成后,立马滑动到下一个视频
下面通过 6 步实现
第 1 步,使用 Andriod Studio 新建一个 Android 项目,使用 Gradle 新增依赖
//build.gradle
//新增依赖
dependencies {
//jsoup负责爬虫
implementation ‘org.jsoup:jsoup:1.13.1’
//JSON数据解析
implementation ‘com.alibaba:fastjson:1.2.70’
}
第 2 步,并新建一个无障碍服务,用于处理抖音页面变动的事件
//DouYinService.java
//无障碍服务
public class DouYinService extends BaseService
{
//主页面Activity
private static final String PAGE_MAIN = “com.ss.android.ugc.aweme.main.MainActivity”;
@Override
public void onAccessibilityEvent(AccessibilityEvent event)
{
String className = event.getClassName().toString();
if (TextUtils.equals(PAGE_MAIN, className))
{
//事件处理
}
}
}
第 3 步,获取单个视频的分享地址
首先,模拟点击分享按钮,跳转到视频分享对话框
//DouYinService.java
//分享按钮id
private static final String ID_SHARE = “com.ss.android.ugc.aweme:id/f4j”;
//查找分享按钮
AccessibilityNodeInfo shareElement = findViewByID(ID_SHARE);
//模拟点击操作
performViewClick(shareElement);
需要注意的是,分享对话框首次展示时,复制视频链接的按钮不可见
因此,需要在分享对话框界面底部 左滑,直到复制视频链接的按钮可见
接着执行点击操作,将当前视频的地址复制到系统剪切板
//DouYinService.java
//向左滑动到复制按钮可见
while (true)
{
if (null == findViewByIDAndText(ID_SHARE_TAG, TEXT_SHARE_TAG))
{
break;
}
AccessibilityNodeInfo copyElement = findViewByIDAndText(ID_COPY_LINK, TEXT_COPY_LINK);
if (null == copyElement)
{
Runtime.getRuntime().exec(“adb shell input swipe 900 1600 300 1600”);
} else
{
Log.d(“xag”, “找到复制按钮,执行点击操作”);
performViewClick(copyElement);
result = true;
break;
}
}
第 4 步,获取视频真实地址
从系统剪切板中读取内容,然后利用 正则表达式 过滤出当前视频真实的分享地址
//StringUtil.java
/***
-
利用正则表达式过滤出真实的视频地址
-
@param data
-
@return
*/
public static String findUrlByStr(String data)
{
Pattern pattern = Pattern.compile(“https?😕/[-A-Za-z0-9+&@#/%?=_|!:,.;]+[-A-Za-z0-9+&@#/%=_|]”);
Matcher matcher = pattern.matcher(data);
if (matcher.find())
{
return matcher.group();
}
return “”;
}
第 5 步,爬取视频时长
文末有福利领取哦~
👉一、Python所有方向的学习路线
Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。
👉二、Python必备开发工具
👉三、Python视频合集
观看零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
👉 四、实战案例
光学理论是没用的,要学会跟着一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。(文末领读者福利)
👉五、Python练习题
检查学习结果。
👉六、面试资料
我们学习Python必然是为了找到高薪的工作,下面这些面试题是来自阿里、腾讯、字节等一线互联网大厂最新的面试资料,并且有阿里大佬给出了权威的解答,刷完这一套面试资料相信大家都能找到满意的工作。
👉因篇幅有限,仅展示部分资料,这份完整版的Python全套学习资料已经上传
网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。
一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!