广点通数据拉取

最新推荐文章于 2023-01-08 15:39:14 发布
最新推荐文章于 2023-01-08 15:39:14 发布
阅读量600 收藏 1
点赞数
分类专栏： 笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44407668/article/details/115383134
版权

广点通的广告数据拉取
首先设计一个接口用于授权回调，授权流程如下，
https://developers.e.qq.com/oauth/authorize?client_id=<CLIENT_ID>&redirect_uri=https://www.example.com/response&state=&scope=
在官方文档你会看到这样的授权说明，
client_id 用户id
redirect_uri回调地址
整个流程就是，你拼好参数直接在浏览器访问回弹出一个回调地址https://www.example.com/response&state=&scope=
访问写好的的地址

设计一个接口

@RequestMapping("/tx/oauth/callback")
	@ResponseBody
	@Menu("广点通初始化回调")
	public Result repairCostgdt(String authorization_code, String state){
		return gdtService.oauth(authorization_code,state);
	}

service层，利用redis等缓存工具去存回调的authorization_code

 /*回调authorization_code*/
    public Result oauth(String authorization_code,String state) {
        System.out.println("@@@@authorization_code"+authorization_code);
        RedisCacheUtils.set("authorization_code",authorization_code);
        gettoken(authorization_code);
        return Result.SUCCESS;
    }

接下来是获取token，同意的道理是存到redis
得到access_token的同时得到一个gdt_refresh_token

 /*第一次授权 获取token和resrefresh_token,已经完成*/
    public boolean gettoken(String authorization_code) {
        StringBuffer stringBuffer=new StringBuffer();
        stringBuffer.append("https://api.e.qq.com/oauth/token?");
        stringBuffer.append("client_id="+client_id+"&");
        stringBuffer.append("client_secret="+client_secret+"&");
        stringBuffer.append("grant_type=authorization_code&");
        stringBuffer.append("redirect_uri=http://opa.i-fu&");
        stringBuffer.append("authorization_code="+从reids拿authorization_code);
        String jsonObject=HttpUtils.get(stringBuffer.toString());
        JSONObject jsonObject1=(JSONObject) JSONObject.parse(jsonObject);
        RedisCacheUtils.set("gdt_access_token",jsonObject1.getString("access_token"));
        RedisCacheUtils.set("gdt_refresh_token",jsonObject1.getString("refresh_token"));
        return true;
    }

如果你的token设置了过时记得去刷新，用reftoken，刷新后的token要存到redis

 /*刷新token，呆开启定时器时调用*/
    public void resreftoken(){
        String resf=String.valueOf(RedisCacheUtils.get("gdt_refresh_token"));
        StringBuffer stringBuffer=new StringBuffer();
        stringBuffer.append("https://api.e.qq.com/oauth/token?");
        stringBuffer.append("client_id="+client_id+"&");
        stringBuffer.append("client_secret="+client_secret+"&");
        stringBuffer.append("grant_type=refresh_token&");
        stringBuffer.append("refresh_token="+resf);
        String jsonObject=HttpUtils.get(stringBuffer.toString());
        JSONObject jsonObject1=(JSONObject) JSONObject.parse(jsonObject);
        JSONObject data=(JSONObject) JSONObject.parse(jsonObject1.getString("data"));
        RedisCacheUtils.set("gdt_access_token",data.getString("access_token"));
    }

接下来就是来取数据

设置公共参数

/*公共参数*/
   public String common(String url){
       StringBuffer stringBuffer=new StringBuffer(url);
       String access_token=String.valueOf(RedisCacheUtils.get("gdt_access_token"));
       String timestamp=String.valueOf(System.currentTimeMillis()/1000);
       String nonce= UUID.randomUUID().toString().trim().replaceAll("-", "");
       String [] fields={"cost","cpc","view_count"};
       stringBuffer.append("access_token="+access_token+"&");
       stringBuffer.append("nonce="+nonce+"&");
       stringBuffer.append("timestamp="+String.valueOf(System.currentTimeMillis()/1000));
       System.out.println("共同参数和api"+stringBuffer.toString());
       return stringBuffer.toString();
   }

进行第一次来取，目的是为了拉取page页码

 /*第一轮拉数据.目的是为了拉到总页码*/
    public JSONObject getpagedata(String statdata,String enddata,int page,String url,String account_id ){
            Map map1=new HashMap();
            map1.put("account_id",account_id);
            map1.put("level","REPORT_LEVEL_ADGROUP");
            map1.put("date_range", "{\"start_date\":\""+statdata+"\",\"end_date\":\""+statdata+"\"}");
            map1.put("page_size","1000");
            map1.put("page",String.valueOf(page));
            map1.put("group_by","[\"hour\",\"adgroup_id\"]");
            map1.put("fields","[\"account_id\",\"ad_name\",\"valid_click_count\",\"view_count\",\"cpc\",\"cost\",\"web_register_count\",\"click_activated_rate\",\"app_register_count\",\"ad_id\",\"hour\",\"adgroup_id\",\"adgroup_name\"]" );
            String path=common(url);
            String res= HttpUtils.get(path,map1);
            System.out.println(res);
            JSONObject result = (JSONObject) JsonUtils.parseObject(res);
            System.out.println("查询结果为"+result.toString());
            return result;
    }

  /*拉取，一小时拉，*/
    public void  getdata(String statdata,String enddata,String url){
        List<Map<String,Object>> list=getDao().queryMapList("SELECT * FROM `lw_gdt_info`");
        for (int j = 0; j < list.size(); j++) {
            JSONObject jsonObject=getpagedata(statdata,enddata,1,url,String.valueOf(list.get(j).get("account_id")));
            if(null !=jsonObject){
                String code=jsonObject.getString("code");
                if("0".equals(code)) {
                    JSONObject jsonObject1 = JSONObject.parseObject(jsonObject.getString("data"));
                    JSONObject jsonObject2= (JSONObject) JSONObject.parse(jsonObject1.getString("page_info"));
                    int total = Integer.valueOf(jsonObject2.getString("total_page"));
                    if (total > 1) {
                        /*对总页码进行循环查询*/
                        for (int i = 1; i <=total; i++) {
                            SimpleDateFormat formatter= new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
                            Date date = new Date(System.currentTimeMillis());


                            /*从返回值中拿当前小时，如果等于当前小时-1，如果为零的时候特别处理*/
                            if(date.getHours()==0){
                                Date today = new Date(System.currentTimeMillis() - 1000 * 60 * 60 * 24);
                                SimpleDateFormat simpleDateFormat = new SimpleDateFormat("yyyy-MM-dd");
                                adddaydata(simpleDateFormat.format(today),simpleDateFormat.format(today),"https://api.e.qq.com/v1.1/hourly_reports/get?",23);
                            }else {
                                List<Map<String,Object>> list1=(List) JSONObject.parse(jsonObject1.getString("list"));
                                System.out.println(list.size());
                                System.out.println(list.toString());
                                JSONObject jsonObject3 = getpagedata(statdata,enddata, i,url,String.valueOf(list.get(j).get("account_id")));
                                JSONObject jsonObject4 = JSONObject.parseObject(jsonObject3.getString("data"));
                                List<Map<String,Object>> list2=(List) JSONObject.parse(jsonObject4.getString("list"));
                                insertPaybuyHour(list2,statdata,date.getHours()-1); }
                        }
                    } else {
                        /*直接入库*/
                        SimpleDateFormat formatter= new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
                        Date date = new Date(System.currentTimeMillis());
                        /*零小时特别处理*/
                        if(date.getHours()==0){
                            Date today = new Date(System.currentTimeMillis() - 1000 * 60 * 60 * 24);
                            SimpleDateFormat simpleDateFormat = new SimpleDateFormat("yyyy-MM-dd");
                            adddaydata(simpleDateFormat.format(today),simpleDateFormat.format(today),"https://api.e.qq.com/v1.1/hourly_reports/get?",23);

                        }else {
                            List<Map<String,Object>> list1=(List) JSONObject.parse(jsonObject1.getString("list"));
                            {
                                insertPaybuyHour(list1,statdata,date.getHours()-1);
                            }
                        }
                    }
                }else { System.out.println("查询接口出错"); }
            }else { System.out.println("没有查到数据"); }
        }



    }

上面就是自动拉取的整个过程

*手动追加数据*/
    public Result adddaydata(String statdata,String enddata,String url,int hour){
        List<Map<String,Object>> list=getDao().queryMapList("SELECT * FROM `lw_gdt_info`");
        /*公共参数*/
        for (int j = 0; j < list.size(); j++) {
        JSONObject jsonObject=getpagedata(statdata,enddata,1,url,String.valueOf(list.get(j).get("account_id")));
        if(null !=jsonObject){
            String code=jsonObject.getString("code");
            if("0".equals(code)) {
                JSONObject jsonObject1 = JSONObject.parseObject(jsonObject.getString("data"));
                JSONObject jsonObject2= (JSONObject) JSONObject.parse(jsonObject1.getString("page_info"));
                int total = Integer.valueOf(jsonObject2.getString("total_page"));
                if (total > 1) {
                    /*对总页码进行循环查询*/
                    for (int i = 1; i <=total; i++) {
                        JSONObject jsonObject3 = getpagedata(statdata,enddata, i,url,String.valueOf(list.get(j).get("account_id")));
                        JSONObject jsonObject4 = JSONObject.parseObject(jsonObject3.getString("data"));
                        List<Map<String,Object>> list1=(List) JSONObject.parse(jsonObject4.getString("list"));
                        if(hour==25){
                            insertPay(list1,statdata);
                        }
                        {
                            insertPaybuyHour(list1,statdata,hour);
                        }
                    }
                } else {
                    /*直接入库*/
                    List<Map<String,Object>> list1=(List) JSONObject.parse(jsonObject1.getString("list"));
                    if(hour==25){
                       //该办法时时你存数据的业务，自己写
                        insertPay(list1,statdata);
                    }
                    {    
                       //该办法时时你存数据的业务，自己写
                        insertPaybuyHour(list1,statdata,hour);
                    }

                }
            }else { System.out.println("查询接口出错"); }
        }else { System.out.println("没有查到数据"); }


    }
        return Result.SUCCESS;
    }

上面的拉取的业务，

追加收动取数据接口

@RequestMapping("/tx/")
	@ResponseBody
	@Menu("广点通手动补充")
	public Result cost(String state,String enddate,int hour){
		/*如果按天拉取数据，hour传25，如果按小时数拉取数据传具体的小时*/
		return gdtService.adddaydata(state,state,"https://api.e.qq.com/v1.1/hourly_reports/get?",hour);
	}

记得开启定时任务，定时拉取

   /*定时刷新token*/
    @Scheduled(cron = "0 10 0/1 ? * *")
    public void reftoken(){

        gdtService.resreftoken();

    }


//    @Scheduled(cron = "0 22 0/1 ? * *")@Scheduled(cron = "0 0/2 * ? * *")
//    /*小时报表*/
    @Scheduled(cron = "0 22 0/1 ? * *")
    @Async
    public void hourdta(){
        SimpleDateFormat formatter= new SimpleDateFormat("yyyy-MM-dd");
        Date date = new Date(System.currentTimeMillis());
        gdtService.getdata(formatter.format(date),formatter.format(date),"https://api.e.qq.com/v1.1/hourly_reports/get?");

    }
Tiny（泰尼）
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 6
    评论
专栏目录
【付费推广】常见问题合集，激励规则FAQ
华为开发者联盟
08-24 207
账户消耗金额的先后顺序为赠送激励金、置换资源基金、充值现金，即当赠送激励金消耗完时，才能启动置换资源基金的消耗，故消耗100万元以上却未收到赠送金额的应用通常为本月总消耗金额含赠送激励金或置换资源基金，扣除后本月现金消耗不足100万元。如果客投伙伴赠送金账户中有余额，则向下级账户充值时会出现充值赠送金的可能，所有推广金的投放效果相同。会，商务会告知当月满足现金消耗的应用的开发者，接到通知的开发者可在后台（开发者联盟 > “管理中心” > “我的账户” > “余额” > “充值记录”）中查看赠送的订单。
ad-core:巨量引擎广告数据拉取
03-17
广告核心 巨量引擎广告数据拉取
腾讯广点通深度用户挖掘与精准广告定向
AITBOOK
08-27 2184
转载：http://www.199it.com/archives/359246.html
腾讯广点通接入总结及源码
每天进步一点点儿
12-13 2万+
接入文档地址：https://developers.e.qq.com/docs/start 由于腾讯的广告业务做的太大，所以接起来还挺麻烦的，比起百度难接入。页面上的客服也是爱答不理的，反正等了一下午也没回我消息！就自己看，也不知道投放部门准备怎么接，就让开发自己看文档！看的头大！！！ 这是腾讯给出的文档说明。 1、用 公用 qq （这个不用说了为啥了吧）注册为开发者后，创建应用...
完美兼容各大浏览器获取HTTP_REFERER方法总结
12-13
后来查了一些相关资料，发现在IE 中通过 [removed].href 或者是 是无法获取HTTP_REFERER， 真是搞不懂 IE 的浏览器，很多浏览器运行的很好的东西，它就是不支持，最后没有办法，只能PHP伪造来源HTTP_REFERER的方法或者用JS来伪造。 IE可以识别的 HTTP_REFERER 提交是通过click 触发的事件或者是 Form 表单提交的请求，下面是根据网上的资料总结的一个方法： [removed] function referURL(url){ var isIe=(document.all)?true:false; if(isIe) { var l
不能取得referer的情况
iteye_20002的博客
04-26 805
下列情况是从浏览器的地址栏正常取得Request.ServerVariables("HTTP_REFERER")的: 1.直接用&lt;a href&gt; 2.用Submit或&lt;input type=image&gt;提交的表单(POST or GET) 3.使用Jscript提交的表单(POST or GET) 下面是Request.ServerVariables(...
埋点数据拉取.zip
06-27
埋点数据拉取.zip
拉取网页数据工具
01-25
使用Delphi XMLHttpRequest拉取请求获得网页数据
php定期拉取数据对比方法实例
10-16
主要给大家介绍了关于php定期拉取数据对比的相关资料，文中通过示例代码介绍的非常详细，对大家学习或者使用php具有一定的参考学习价值，需要的朋友们下面来一起学习学习吧
基于强化学习的自动炒股交易，内含数据拉取脚本以及强化学习训练脚本
12-12
基于强化学习的自动炒股交易，内含数据拉取脚本以及强化学习训练脚本
腾讯广告 广点通 数据上报 上传用户行为数据
qq_32550561的博客
12-21 3239
腾讯广告 广点通 数据上报 上传用户行为数据 PHP
腾讯广告广点通API接入文档(Android)
weixin_33901926的博客
08-24 2万+
官方文档地址 如果能够看懂文档的也没有必要再往下面看了。本篇文章就到此结束。 下面记录的是本人在上面锁踩过的坑，因为我发现Mac电脑上面的联系客服不是我想要的。 本来只是内部使用的文档，后来想想还是公开出来，希望能够帮助到人。 进入正式的接入流程吧！！！ Step 1: 注册成为开发者 Step 2: 创建应用 这两步建议可以直接看文档，坑不在这一块。但是创建应用的时候有几个点可以注意下 应用...
第三方登录之QQ登录（二）——OAuth2.0处理流程介绍（以QQ登录为例）
热门推荐
崔成龙 . 勇往直前
07-25 8万+
为了让网站更快接入，腾讯提供了JS SDK的接入方案，具体点击这里或者点击这里进行查看。     不过也可以自己写代码，当然你需要了解QQ的OAuth2.0的处理流程（Web Server Flow）。 OAuth2.0的处理流程： 点击这里查看官方Wiki。 1.授权：获取授权码Authorization Code  说明：第一步QQ必须得到要登
OAuth 授权链接里的回调地址参数丢失
jiaobuchong的专栏
04-16 4310
OAuth 的授权链接里有一个回调地址的参数： https://developers.e.qq.com/oauth/authorize?client_id=123456&redirect_uri=https://www.baidu.com?platform=jiaobuchong&name=jack&state=&scope=ADS_MANAGEMENT 这个授权...
Spring cloud oauth2.0学习总结
菜鸟很菜的专栏
04-14 4万+
因为项目需要，调研并使用了Spring cloud oauth2.0，网上关于oauth2.0的介绍很多，包括交互的流程等等。这里，我不再介绍这些，直接深入讲解，并附上实践代码。希望能对大家有帮助。 相关链接： Spring cloud oauth2.0的源码解析和本人实现的三个Demo，第一个Demo是使用Spring cloud oauth2.0来实现单点登陆；第二个Demo是使用Jdbc
对接腾讯广告(广点通) 上传用户行为
uknowzxt的博客
05-21 7495
前言 不知道有没有跟我一样的同学, 每次新对接的一个腾讯产品的时候看着它的api就感觉头疼哈哈 官方文档链接 :https://developers.e.qq.com/docs/start 账号 关于client_id和client_secret, 这个是要在开发者账号中新建应用, 进而获取到client_id和client_secret, 在我向运营姐姐要这个参数的时候, 她以为这个是广告主账号里面应用的appid就给我了, 所以在进行访问授权链接的时候就会提示"加载应用信息失败，您授权的应用id不
腾讯广点通广告投放-转化归因API回传接口对接踩坑指南
从改变自己开始
01-08 7515
中教又折腾了一下，把两个回调地址写上去，投放广告，获取回来参数了，因为开始以为用get请求，只需要click_id就行了，所以只关注到点击id，在知道了点击id和url后，调用get请求后，响应:{"code":0,"message":"ok","data":"TrackingCgi Success."}以为终于成功了。以为一下就能搞定了，但是对接下来才发现，各个字段根本不知道什么意思，后面再找其他文档，官网上，还有找他们运营，折腾了足足一个多月才搞清楚他们的回传方式，实在是服了。
php怎么接入广点通,Android接入腾讯广告平台广点通
weixin_30346649的博客
03-10 631
广点通文档不知道注册成功之后是不是有更详细的文档,暂未知, 我自己注册的还未通过找到的教程这个有点过时, 里面一些用法跟我现在的不一样, 不过很详细1 jar包我的jar包版本为GDTUnionSDK.4.18.569.min.jar, 应该是注册后从官网下载的2 权限复制代码3 Manifestandroid:name="com.qq.e.ads.ADActivity"android:confi...
pandas数据拉取
最新发布
04-29
以下是Pandas数据拉取的简单步骤： 1. 导入Pandas库 在代码中需要先导入Pandas库，这可以通过以下代码完成： ``` import pandas as pd ``` 2. 读取数据文件 Pandas支持多种数据文件格式，如CSV、Excel、JSON等，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Tiny（泰尼）

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值