liufu123 发表于 2022-11-18 11:23

Python调用，爬虫JS逆向—— sign参数获取步骤和方法

## JS逆向—sign参数
####无法直接请求数据，需添加sign参数进行请求
###### 目标网站：https://sale.1688.com/factory/home.html?spm=a260k.22464671.kyebv087.2.13d47a6e2aTz9Q
###### 1. html中无法找到正文数据，找到接口位置，大致记住参数部分。
![在这里插入图片描述](https://img-blog.csdnimg.cn/b5c1e095bded4788b439a102f19b7f2e.png)
###### 2. 在文件中找到启动器，进去JS文件中。
![在这里插入图片描述](https://img-blog.csdnimg.cn/10426d60b689434ea4fcddac9ac44393.png)
###### 3. JS文件中搜索sign，找到完整的sign位置，可以看出sign是由j生成，解出j函数。
![在这里插入图片描述](https://img-blog.csdnimg.cn/b127ca02b4364df6a42fad38843ecea7.png)
![在这里插入图片描述](https://img-blog.csdnimg.cn/4b8e584782824b2c83ae543d8ee71f91.png)
###### 4. 在j的位置进行断点，刷新网页，将d.token、i、g、c.data找出（c.data 跟数据接口的data来对比）
![在这里插入图片描述](https://img-blog.csdnimg.cn/bacfa4f45b4d44499f6d3479f597bd49.png)
###### 5. 取出参数，写入python代码。
```python
import time
# d.token + "&" + i + "&" + g + "&" + c.data
# token 会变化。
token = '************************'
i = round(time.time() * 1000)
g = '12574478'
data = '{"cid":"FactorySearchPCConditionService:FactorySearchPCConditionService","methodName":"execute","params":"{\\"lv1RecCateSize\\":\\"50\\",\\"classifyByCategory\\":\\"true\\",\\"classifyByGeo\\":\\"true\\",\\"from\\":\\"pc_index_recommend\\",\\"trafficSource\\":\\"pc_index_recommend\\",\\"url\\":\\"https://sale.1688.com/factory/home.html?spm=a260k.dacugeneral.0.0\\"}"}'
signkey = token + '&' + str(i) + '&' + g + '&' + data
```
###### 6. 进入h方法，将整个函数写入js文件中。![在这里插入图片描述](https://img-blog.csdnimg.cn/073c2cb3928d4462a5bc619ac5799eda.png)
![在这里插入图片描述](https://img-blog.csdnimg.cn/c2159bc68c3344b19fb588b9170239cb.png)
###### 7. 创建js文件，将找到的h方法写入js文件。

```javascript
    function h(a) {
      function b(a, b) {
            return a << b | a >>> 32 - b
      }
      function c(a, b) {
            var c, d, e, f, g;
            return e = 2147483648 & a,
            f = 2147483648 & b,
            c = 1073741824 & a,
            d = 1073741824 & b,
            g = (1073741823 & a) + (1073741823 & b),
            c & d ? 2147483648 ^ g ^ e ^ f : c | d ? 1073741824 & g ? 3221225472 ^ g ^ e ^ f : 1073741824 ^ g ^ e ^ f : g ^ e ^ f
      }
      function d(a, b, c) {
            return a & b | ~a & c
      }
      function e(a, b, c) {
            return a & c | b & ~c
      }
      function f(a, b, c) {
            return a ^ b ^ c
      }
      function g(a, b, c) {
            return b ^ (a | ~c)
      }
      function h(a, e, f, g, h, i, j) {
            return a = c(a, c(c(d(e, f, g), h), j)),
            c(b(a, i), e)
      }
      function i(a, d, f, g, h, i, j) {
            return a = c(a, c(c(e(d, f, g), h), j)),
            c(b(a, i), d)
      }
      function j(a, d, e, g, h, i, j) {
            return a = c(a, c(c(f(d, e, g), h), j)),
            c(b(a, i), d)
      }
      function k(a, d, e, f, h, i, j) {
            return a = c(a, c(c(g(d, e, f), h), j)),
            c(b(a, i), d)
      }
      function l(a) {
            for (var b, c = a.length, d = c + 8, e = (d - d % 64) / 64, f = 16 * (e + 1), g = new Array(f - 1), h = 0, i = 0; c > i; )
                b = (i - i % 4) / 4,
                h = i % 4 * 8,
                g = g | a.charCodeAt(i) << h,
                i++;
            return b = (i - i % 4) / 4,
            h = i % 4 * 8,
            g = g | 128 << h,
            g = c << 3,
            g = c >>> 29,
            g
      }
      function m(a) {
            var b, c, d = "", e = "";
            for (c = 0; 3 >= c; c++)
                b = a >>> 8 * c & 255,
                e = "0" + b.toString(16),
                d += e.substr(e.length - 2, 2);
            return d
      }
      function n(a) {
            a = a.replace(/\r\n/g, "\n");
            for (var b = "", c = 0; c < a.length; c++) {
                var d = a.charCodeAt(c);
                128 > d ? b += String.fromCharCode(d) : d > 127 && 2048 > d ? (b += String.fromCharCode(d >> 6 | 192),
                b += String.fromCharCode(63 & d | 128)) : (b += String.fromCharCode(d >> 12 | 224),
                b += String.fromCharCode(d >> 6 & 63 | 128),
                b += String.fromCharCode(63 & d | 128))
            }
            return b
      }
      var o, p, q, r, s, t, u, v, w, x = [], y = 7, z = 12, A = 17, B = 22, C = 5, D = 9, E = 14, F = 20, G = 4, H = 11, I = 16, J = 23, K = 6, L = 10, M = 15, N = 21;
      for (a = n(a),
      x = l(a),
      t = 1732584193,
      u = 4023233417,
      v = 2562383102,
      w = 271733878,
      o = 0; o < x.length; o += 16)
            p = t,
            q = u,
            r = v,
            s = w,
            t = h(t, u, v, w, x, y, 3614090360),
            w = h(w, t, u, v, x, z, 3905402710),
            v = h(v, w, t, u, x, A, 606105819),
            u = h(u, v, w, t, x, B, 3250441966),
            t = h(t, u, v, w, x, y, 4118548399),
            w = h(w, t, u, v, x, z, 1200080426),
            v = h(v, w, t, u, x, A, 2821735955),
            u = h(u, v, w, t, x, B, 4249261313),
            t = h(t, u, v, w, x, y, 1770035416),
            w = h(w, t, u, v, x, z, 2336552879),
            v = h(v, w, t, u, x, A, 4294925233),
            u = h(u, v, w, t, x, B, 2304563134),
            t = h(t, u, v, w, x, y, 1804603682),
            w = h(w, t, u, v, x, z, 4254626195),
            v = h(v, w, t, u, x, A, 2792965006),
            u = h(u, v, w, t, x, B, 1236535329),
            t = i(t, u, v, w, x, C, 4129170786),
            w = i(w, t, u, v, x, D, 3225465664),
            v = i(v, w, t, u, x, E, 643717713),
            u = i(u, v, w, t, x, F, 3921069994),
            t = i(t, u, v, w, x, C, 3593408605),
            w = i(w, t, u, v, x, D, 38016083),
            v = i(v, w, t, u, x, E, 3634488961),
            u = i(u, v, w, t, x, F, 3889429448),
            t = i(t, u, v, w, x, C, 568446438),
            w = i(w, t, u, v, x, D, 3275163606),
            v = i(v, w, t, u, x, E, 4107603335),
            u = i(u, v, w, t, x, F, 1163531501),
            t = i(t, u, v, w, x, C, 2850285829),
            w = i(w, t, u, v, x, D, 4243563512),
            v = i(v, w, t, u, x, E, 1735328473),
            u = i(u, v, w, t, x, F, 2368359562),
            t = j(t, u, v, w, x, G, 4294588738),
            w = j(w, t, u, v, x, H, 2272392833),
            v = j(v, w, t, u, x, I, 1839030562),
            u = j(u, v, w, t, x, J, 4259657740),
            t = j(t, u, v, w, x, G, 2763975236),
            w = j(w, t, u, v, x, H, 1272893353),
            v = j(v, w, t, u, x, I, 4139469664),
            u = j(u, v, w, t, x, J, 3200236656),
            t = j(t, u, v, w, x, G, 681279174),
            w = j(w, t, u, v, x, H, 3936430074),
            v = j(v, w, t, u, x, I, 3572445317),
            u = j(u, v, w, t, x, J, 76029189),
            t = j(t, u, v, w, x, G, 3654602809),
            w = j(w, t, u, v, x, H, 3873151461),
            v = j(v, w, t, u, x, I, 530742520),
            u = j(u, v, w, t, x, J, 3299628645),
            t = k(t, u, v, w, x, K, 4096336452),
            w = k(w, t, u, v, x, L, 1126891415),
            v = k(v, w, t, u, x, M, 2878612391),
            u = k(u, v, w, t, x, N, 4237533241),
            t = k(t, u, v, w, x, K, 1700485571),
            w = k(w, t, u, v, x, L, 2399980690),
            v = k(v, w, t, u, x, M, 4293915773),
            u = k(u, v, w, t, x, N, 2240044497),
            t = k(t, u, v, w, x, K, 1873313359),
            w = k(w, t, u, v, x, L, 4264355552),
            v = k(v, w, t, u, x, M, 2734768916),
            u = k(u, v, w, t, x, N, 1309151649),
            t = k(t, u, v, w, x, K, 4149444226),
            w = k(w, t, u, v, x, L, 3174756917),
            v = k(v, w, t, u, x, M, 718787259),
            u = k(u, v, w, t, x, N, 3951481745),
            t = c(t, p),
            u = c(u, q),
            v = c(v, r),
            w = c(w, s);
      var O = m(t) + m(u) + m(v) + m(w);
      return O.toLowerCase()
    }
```

###### 8. 在python中对参数进行整合，传入js文件得到加密参数sign。

```python
import time
import execjs
import requests

# d.token + "&" + i + "&" + g + "&" + c.data
token = '************************'
i = round(time.time() * 1000)
g = '12574478'
data = '{"cid":"FactorySearchPCConditionService:FactorySearchPCConditionService","methodName":"execute","params":"{\\"lv1RecCateSize\\":\\"50\\",\\"classifyByCategory\\":\\"true\\",\\"classifyByGeo\\":\\"true\\",\\"from\\":\\"pc_index_recommend\\",\\"trafficSource\\":\\"pc_index_recommend\\",\\"url\\":\\"https://sale.1688.com/factory/home.html?spm=a260k.dacugeneral.0.0\\"}"}'

signkey = token + '&' + str(i) + '&' + g + '&' + data

with open('./16xxsign加密.js','r',encoding='utf-8') as f:
    jscall = f.read()

ctx = execjs.compile(jscall).call('h',signkey)
print(ctx)

ctx输出：7a19d23c2be028316ab448fb582e9c6b

```

###### 9. 在python中url进行访问，取出需要的数据。

```python

import time
import execjs
import requests

# d.token + "&" + i + "&" + g + "&" + c.data
token = '************************'
i = round(time.time() * 1000)
g = '12574478'
data = '{"cid":"FactorySearchPCConditionService:FactorySearchPCConditionService","methodName":"execute","params":"{\\"lv1RecCateSize\\":\\"50\\",\\"classifyByCategory\\":\\"true\\",\\"classifyByGeo\\":\\"true\\",\\"from\\":\\"pc_index_recommend\\",\\"trafficSource\\":\\"pc_index_recommend\\",\\"url\\":\\"https://sale.1688.com/factory/home.html?spm=a260k.dacugeneral.0.0\\"}"}'

signkey = token + '&' + str(i) + '&' + g + '&' + data

with open('./16xxsign加密.js','r',encoding='utf-8') as f:
    jscall = f.read()

ctx = execjs.compile(jscall).call('h',signkey)
# print(ctx)

url = 'https://h5api.m.1688.com/h5/mtop.taobao.widgetservice.getjsoncomponent/1.0/?'

payload = {'jsv': '2.6.1', 'appKey': g, 't': i, 'sign': ctx, 'v': '1.0', 'type': 'jsonp', 'isSec': 0,
         'timeout': 20000, 'api': 'mtop.taobao.widgetService.getJsonComponent', 'dataType': 'jsonp', 'jsonpIncPrefix': 'mboxfc',
         'callback': 'mtopjsonpmboxfc9', 'data': data}

headers = {
'cookie': 'cookie2=1c0abad5c2140fdeede0825e2afc1d61; t=158eb3f1db5b6433c138d96a55bff422; _tb_token_=e9b6d8de8eebe; __cn_logon__=false; cna=BsypG+e0SikCAX0mpQ6sZKaj; ali_ab=117.14.229.124.1667377780458.6; _csrf_token=1668502961679; _m_h5_tk=e01893f248fba2155ddbf5ad725026c8_1668591039098; _m_h5_tk_enc=02271f81b3eb9e5860e2d6d24e1ca468; xlly_s=1; alicnweb=touch_tb_at%3D1668584062851; tfstk=cUrCBb2Jj7ENcAIkxX6NaMWW1anCZ9KIQ9Ggd66MrW5evmyCihtqGQxQECnreA1..; l=eBOBUSdmTJ6RPHFh2Ofwourza77OSIRAguPzaNbMiOCPOPCp5r7CW6zJ0AL9C3GVh6yWR3kzvXKpBeYBcIjcdlWlc7DZWVHmn; isg=BHV1Kcb6ekD1w57qTSyw0YfbhPcv8ikEmNzmk_eaMew7zpXAv0I51INIGJJ4jkG8',
'sec-fetch-site': 'same-site',
'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/107.0.0.0 Safari/537.36'
}

res = requests.get(url,headers=headers,data=payload)
print(res.text)
```

Miyano 发表于 2022-11-18 15:45

硬核了。。学习一下，谢谢分享

liufu123 发表于 2022-11-18 14:25

koo8chun 发表于 2022-11-18 13:01
跟何老师讲的一样

我就是实操记录一下，{:301_1001:}

天真Aro 发表于 2022-11-18 12:28

思路清晰，学到了！

koo8chun 发表于 2022-11-18 13:01

跟何老师讲的一样

constwm 发表于 2022-11-18 14:04

学习学习

lcg2014 发表于 2022-11-18 14:10

太变态了，似乎没有动力学习爬虫了

fwpan 发表于 2022-11-18 14:20

高级高级{:1_921:}

liufu123 发表于 2022-11-18 14:27

constwm 发表于 2022-11-18 14:04
学习学习

一起一起。。{:301_998:}

liufu123 发表于 2022-11-18 14:28

lcg2014 发表于 2022-11-18 14:10
太变态了，似乎没有动力学习爬虫了

别闹，8年大佬。
页: [1] 2 3 4 5
查看完整版本: Python调用，爬虫JS逆向—— sign参数获取步骤和方法


免责声明：
吾爱破解所发布的一切破解补丁、注册机和注册信息及软件的解密分析文章仅限用于学习和研究目的；不得将上述内容用于商业或者非法用途，否则，一切后果请用户自负。本站信息来自网络，版权争议与本站无关。您必须在下载后的24个小时之内，从您的电脑中彻底删除上述内容。如果您喜欢该程序，请支持正版软件，购买注册，得到更好的正版服务。如有侵权请邮件与我们联系处理。

Mail To:Service@52pojie.cn