使用Ownips工具获取跨境电商网站商品价格

一、引言

在数字化浪潮汹涌的今天，互联网已经成为我们生活、工作中不可或缺的一部分。而在这个虚拟的世界里，每一个设备都需要一个独特的标识来确保信息的准确传递，这个标识就是IP地址。而在众多IP地址中，静态IP因其独特的稳定性和可靠性，成为了许多高端应用和场景的首选。

二、什么是静态代理IP

静态IP就是一个固定不变的IP地址，与动态IP地址相比，静态IP地址是手动分配给设备的，不会随着时间的推移或网络环境的改变而改变。这就好比在繁忙的城市中，动态IP地址就像是一辆辆不断变换车牌的出租车，而静态IP地址则是一辆拥有固定车牌的私家车，无论它走到哪里，都可以通过这个固定的车牌来找到它。

2.1、静态代理IP的特点

在这里，我们先介绍一下静态代理IP的主要特征和作用：

1. 固定不变：静态代理IP的IP地址是固定的，一旦分配给用户后，在有效期内不会改变，这使得它适用于那些需要长期稳定连接的应用场景，比如数据抓取、SEO优化、市场分析等。

2. 隐藏真实IP：使用静态代理IP可以隐藏用户的原始IP地址，保护用户的真实身份不被目标服务器识别，减少因为频繁访问同一网站而被对方识别并实施一些措施。

3. 地区定位：由于静态代理IP往往有明确的地理位置属性，用户可以根据需求选择不同国家或地区的IP，以便于模拟本地用户进行网络访问，这对于地域定向的数据收集或者跨国业务的执行至关重要。

4. 提高访问速度：如果代理服务器位于网络条件较好的地区，那么通过代理IP访问某些速度缓慢的目标网站，有可能会比直接访问更快。

5. 高效采集全球公开数据：对于某些受到地区或防火墙问题的平台，通过更换合适的静态代理IP，可以帮助我们访问原本无法访问的网站和服务。

因此，在数据抓取、网络爬虫、网络营销、网络安全等多个领域，静态代理IP都是一个非常实用且重要的工具。

很多海外平台都有着较严格的风控策略，既然咱无法“肉身出国”，全球各地到处跑，最好的选择自然是使用海外代理 ip，但是大多数海外代理 ip 都价格不菲，但是今晚我要为大伙推荐一家国内极具优点的公司-----Ownips

三、Ownips：数据收集与爬虫应用中的“超级英雄”

为什么说 Ownips 海外静态代理IP好用呢，接下来请看VCR。

在数字时代，数据就像黄金一样宝贵。而我们公司，作为一名热衷于数据挖掘和爬虫技术的“矿工”，时常面临着各种挑战。去年我们接到了一个棘手的任务：从某知名电商平台抓取大量商品信息，为公司的新产品上市提供数据支持。

当时一开始，我们信心满满地启动了爬虫程序，结果却遭遇了一波又一波的“因判断IP属性，无法高效采集公开数据”。我们的爬虫仿佛成了“过街老鼠”，被目标网站一次次地拒之门外。看着屏幕上跳动的错误代码，我们不禁感叹：这数据收集之路，怎一个“难”字了得！

就在这时，我们的“救星”出现了——Ownips海外静态代理IP。它就像一个身披斗篷的“超级英雄”，悄然降临在我们的工作台上。我们当时就决定试试这个传说中的“神器”，看看它能否助我们一臂之力。

目标：海外电商网站wish商品价格

接口：

aHR0cHM6Ly93d3cud2lzaC5jb20vYXBpL2dldC11bml2ZXJzYWwtaG9tZXBhZ2U=

然后按下F12键，进入浏览器开发者模式界面，点击打开网络窗口和搜索窗口，按下F5刷新一次请求，搜索本页的最后一个商品的前几个词，就可以找到对应请求。

在右侧窗口中可以看到对应请求的标头、载荷和响应体：

分析JSON可以得知,商品列表存在msg中所以我们可以使用Python中的requests库发送HTTP GET请求到https://www.wish.com/api/get-universal-homepage，同时传递刚刚记录下来的参数params和请求头headers，得到response对象后，使用requestion.json()方法来提取response 返回的json数据msg对象下的data数组的所有元素：

得到数据后开始遍历数据并拿到我们想要的

我们配置了Ownips的海外静态代理IP，让爬虫程序通过它去访问目标网站。

这一招果然奏效，我们的爬虫瞬间变得“隐形”起来，成功访问网站公开数据。不仅如此，Ownips 的代理IP还具有高稳定性和高速率的特点，让我们的爬虫能够更高效地抓取数据。

如果不加代理IP就访问不了国外的网站，因为长城防火墙的问题，成为最棘手的地方，我们尝试了市面上各种的代理发现Ownips 非常符合帮助我们解决这个技术难点。

为了方便我们学习并使用，我把详细代码放到下面：

import requests
from pprint import  pprint
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:85.0) Gecko/20100101 Firefox/85.0",
    "Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8",
    "Accept-Language": "zh-CN,zh;q=0.8,zh-TW;q=0.7,zh-HK;q=0.5,en-US;q=0.3,en;q=0.2",
    "Accept-Encoding": "gzip, deflate, br"
}

def get_proxy():
    url = "https://api-proxy.ownips.com/getIsp?num=1&type=1&lb=4&sb=0&flow=1&regions=&attribute=isp"
    host, port = requests.get(url, headers).text.split(":")
    port = port.replace("\n",'')
    proxies = {
        'http': 'http://{}:{}@{}:{}'.format("testuser001",123456,host, port),
        'https': 'http://{}:{}@{}:{}'.format("testuser001",123456,host, port),
    }
    return proxies



proxies = get_proxy()
print(proxies)




def get_value(proxies):
    cookies = {
        'bsid': 'f985f095efbe4188a3ee07e6ddfab408',
        'vendor_user_tracker': 'a23f98bf7e6af68e42d658587d5fbe92b5e29d128771107248ce043a84b784f7',
        'visitor_id': '0dcf2fd5e88a47e9b7b819ebc9a72d04',
        '_xsrf': '2|20aa6812|b364d7a5acd3b47c6f1b9847e9a69637|1712906525',
        'sajssdk_2015_cross_new_user': '1',
        'sensorsdata2015jssdkcross': '%7B%22distinct_id%22%3A%2218ed12f51b111d3-054605c255d331-26001a51-2073600-18ed12f51b21546%22%2C%22first_id%22%3A%22%22%2C%22props%22%3A%7B%22%24latest_traffic_source_type%22%3A%22%E8%87%AA%E7%84%B6%E6%90%9C%E7%B4%A2%E6%B5%81%E9%87%8F%22%2C%22%24latest_search_keyword%22%3A%22%E6%9C%AA%E5%8F%96%E5%88%B0%E5%80%BC%22%2C%22%24latest_referrer%22%3A%22https%3A%2F%2Fwww.google.com%2F%22%7D%2C%22identities%22%3A%22eyIkaWRlbnRpdHlfY29va2llX2lkIjoiMThlZDEyZjUxYjExMWQzLTA1NDYwNWMyNTVkMzMxLTI2MDAxYTUxLTIwNzM2MDAtMThlZDEyZjUxYjIxNTQ2In0%3D%22%2C%22history_login_id%22%3A%7B%22name%22%3A%22%22%2C%22value%22%3A%22%22%7D%2C%22%24device_id%22%3A%2218ed12f51b111d3-054605c255d331-26001a51-2073600-18ed12f51b21546%22%7D',
        'notice_behavior': 'implied,eu',
        '_timezone': '8',
        '_is_desktop': 'true',
        'sweeper_session': '"2|1:1|10:1712906530|15:sweeper_session|84:MWNhM2I2YTMtY2UzNC00MWNhLTlhOTktNGZlZGRjMTkyZTlkMjAyNC0wNC0xMiAwNzoyMjowNS43NDgzOTA=|3b38c553e1e0adf6d9ecbeab48e593043ec44cb1c7edca1b84ad517e84121073"',
        'hide_desktop_sign_in_tooltip': '1',
        'sessionRefreshed_6618e11dfafe70756f30af9f': 'true',
        'is_cookie_banner_loaded': 'true',
        'is_seo_visitor': '1',
        '__cf_bm': 'KVjBX3ZO8tqDzFAKBDSYsp85Nxn7dsrMW8EQfURC6sY-1712911332-1.0.1.1-NNbGonMekvtm0kfC657gJxdL_3ALe1_Y.wR1jnrNiWsgijBQ9sDS0qlSBaR6an0Y1RCQSDb3Z2nRwgZqgBrx6g',
        'TAsessionID': '28703b87-0f34-43b3-b11f-991b217fbedf|NEW',
        'forterToken': '7f9c93aa49714e03834922fe14133f7b_1712911348068_259_UAS9_15ck',
        'number_of_product_per_row': '3',
    }

    headers = {
        'accept': 'application/json, text/plain, */*',
        'accept-language': 'zh-CN,zh;q=0.9',
        'cache-control': 'no-cache',
        'content-type': 'application/x-www-form-urlencoded',
        # 'cookie': 'bsid=f985f095efbe4188a3ee07e6ddfab408; vendor_user_tracker=a23f98bf7e6af68e42d658587d5fbe92b5e29d128771107248ce043a84b784f7; visitor_id=0dcf2fd5e88a47e9b7b819ebc9a72d04; _xsrf=2|20aa6812|b364d7a5acd3b47c6f1b9847e9a69637|1712906525; sajssdk_2015_cross_new_user=1; sensorsdata2015jssdkcross=%7B%22distinct_id%22%3A%2218ed12f51b111d3-054605c255d331-26001a51-2073600-18ed12f51b21546%22%2C%22first_id%22%3A%22%22%2C%22props%22%3A%7B%22%24latest_traffic_source_type%22%3A%22%E8%87%AA%E7%84%B6%E6%90%9C%E7%B4%A2%E6%B5%81%E9%87%8F%22%2C%22%24latest_search_keyword%22%3A%22%E6%9C%AA%E5%8F%96%E5%88%B0%E5%80%BC%22%2C%22%24latest_referrer%22%3A%22https%3A%2F%2Fwww.google.com%2F%22%7D%2C%22identities%22%3A%22eyIkaWRlbnRpdHlfY29va2llX2lkIjoiMThlZDEyZjUxYjExMWQzLTA1NDYwNWMyNTVkMzMxLTI2MDAxYTUxLTIwNzM2MDAtMThlZDEyZjUxYjIxNTQ2In0%3D%22%2C%22history_login_id%22%3A%7B%22name%22%3A%22%22%2C%22value%22%3A%22%22%7D%2C%22%24device_id%22%3A%2218ed12f51b111d3-054605c255d331-26001a51-2073600-18ed12f51b21546%22%7D; notice_behavior=implied,eu; _timezone=8; _is_desktop=true; sweeper_session="2|1:1|10:1712906530|15:sweeper_session|84:MWNhM2I2YTMtY2UzNC00MWNhLTlhOTktNGZlZGRjMTkyZTlkMjAyNC0wNC0xMiAwNzoyMjowNS43NDgzOTA=|3b38c553e1e0adf6d9ecbeab48e593043ec44cb1c7edca1b84ad517e84121073"; hide_desktop_sign_in_tooltip=1; sessionRefreshed_6618e11dfafe70756f30af9f=true; is_cookie_banner_loaded=true; is_seo_visitor=1; __cf_bm=KVjBX3ZO8tqDzFAKBDSYsp85Nxn7dsrMW8EQfURC6sY-1712911332-1.0.1.1-NNbGonMekvtm0kfC657gJxdL_3ALe1_Y.wR1jnrNiWsgijBQ9sDS0qlSBaR6an0Y1RCQSDb3Z2nRwgZqgBrx6g; TAsessionID=28703b87-0f34-43b3-b11f-991b217fbedf|NEW; forterToken=7f9c93aa49714e03834922fe14133f7b_1712911348068_259_UAS9_15ck; number_of_product_per_row=3',
        'origin': 'https://www.wish.com',
        'pragma': 'no-cache',
        'referer': 'https://www.wish.com/',
        'sec-ch-ua': '"Google Chrome";v="123", "Not:A-Brand";v="8", "Chromium";v="123"',
        'sec-ch-ua-mobile': '?0',
        'sec-ch-ua-platform': '"Windows"',
        'sec-fetch-dest': 'empty',
        'sec-fetch-mode': 'cors',
        'sec-fetch-site': 'same-origin',
        'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/123.0.0.0 Safari/537.36',
        'x-xsrftoken': '2|20aa6812|b364d7a5acd3b47c6f1b9847e9a69637|1712906525',
    }

    data = {
        'count': '30',
        'offset': '1610743813',
        'num_columns': '5',
        'true_client_offset': '1610743813',
    }

    response = requests.post('https://www.wish.com/api/get-universal-homepage', cookies=cookies, headers=headers, data=data, proxies=proxies)
   # pprint(response.json()["data"]["modules"])
    return response.json()["data"]["modules"]


data = get_value()

我们同时还进行了大规模的数据收集。无论是商品详情、价格信息还是用户评价，我们的爬虫都能够轻松获取。

在使用Ownips海外静态代理IP的过程中，我们还发现它的一些“隐藏技能”。比如，它能够自动过滤掉无效和重复的IP地址，让我们的爬虫更加精准地定位目标数据。此外，Ownips还提供了详细的日志记录和数据分析功能，让我们能够随时掌握爬虫的工作状态和数据抓取情况。

以上，就是利用Ownips海外静态代理IP帮助我们部门完成了数据收集任务！！！

四、Ownips产品优势

经过对Ownips 产品的实践以及对Ownips 产品的了解，我们一起总结下 Ownips 产品的优势：

权威认证：Ownips是IPIDEA旗下的静态IP代理品牌，像是一位经验丰富的老司机，深谙行业路况，为世界500强企业、顶尖团队和个人开发者提供代理服务。覆盖互联网、跨境电商、旅游、金融及游戏等多个领域，同时致力于提供定制化的解决方案，实现精准高效的定制化服务体验。

原生ISP资源：Ownips优选原生本土ISP资源，提供真实住宅设备的原生私人IP，具备完全的真人属性，有对IP质量有高要求的伙伴可以选择此IP类型。

高稳定性：Ownips提供的代理IP具备99.99%的在线稳定运行率，保证我们的业务能够持续、稳定地进行。

纯净度高：Ownips的IP资源非常纯净，本地运营商直采而来，可提供运营商ASN信息，保证IP的纯净度，提供更安全更真实的网络环境。

无限并发，无限流量：Ownips的IP资源支持无限并发，而且流量尽享，且无需额外费用，从而全面满足大家业务拓展的无限需求。

五、文章小结

静态代理IP以其独特的稳定性和可靠性，在数据抓取、网络爬虫、网络营销等多个领域发挥着重要作用。作为海外静态代理IP其中的佼佼者，凭借其高质量的服务和专业的技术支持，成为了许多企业和个人的首选。

通过使用Ownips，我们可以安全访问全球网站公开数据，高效抓取数据，为业务决策提供有力支持。在未来的发展中，静态代理IP将继续发挥其独特优势，助力我们在数字化浪潮中乘风破浪、勇往直前。

文章到这里就结束了，欢迎大家一起体验Ownips海外静态代理IP哦：点击进入官网 。