xxmdmst 发表于 2023-7-28 11:03

【油猴脚本】抖音用户主页数据下载

脚本安装链接:https://greasyfork.org/zh-CN/scripts/471880-%E6%8A%96%E9%9F%B3%E7%94%A8%E6%88%B7%E4%B8%BB%E9%A1%B5%E6%95%B0%E6%8D%AE%E4%B8%8B%E8%BD%BD
安装插件后,打开任意抖音用户主页右上角会出现如下两个按钮:


点击下载可以得到如下格式的文件:

里面包含原始视频链接,可以自由选择是否手动下载视频。

源码如下:
```js
(function () {
    'use strict';
    let aweme_list = [];
    let userKey = [
      "昵称", "关注", "粉丝",
      "获赞", "抖音号", "IP属地",
      "年龄", "签名", "作品数", "主页"
    ];
    let userData = [];

    function extractDataFromScript() {
      const scriptTag = document.getElementById('RENDER_DATA');
      if (!scriptTag) return;
      let data = JSON.parse(decodeURIComponent(scriptTag.innerHTML));

      for (const prop in data) {
            if (data.hasOwnProperty(prop) && prop !== "_location" && prop !== "app") {
                const user = data;
                let userInfo = user.user.user;
                console.log(userInfo);
                userData.push(
                  userInfo.nickname, userInfo.followingCount, userInfo.mplatformFollowersCount,
                  userInfo.totalFavorited, userInfo.uniqueId, userInfo.ipLocation,
                  userInfo.age, '"' + userInfo.desc + '"', userInfo.awemeCount, "https://www.douyin.com/user/" + userInfo.secUid
                );
                let post_data = user.post.data.map(item => Object.assign({"desc": item.desc}, item.stats,
                  {"url": "https:" + item.video.playAddr.src}));
                aweme_list = aweme_list.concat(post_data);
            }
      }
    }

    function createButton(title, top) {
      top = top === undefined ? "60px" : top;
      const button = document.createElement('button');
      button.textContent = title;
      button.style.position = 'fixed';
      button.style.right = '5px';
      button.style.top = top;
      button.style.zIndex = '90000';
      document.body.appendChild(button);
      return button
    }

    function txt2file(txt, filename) {
      const blob = new Blob(, {type: 'text/plain'});
      const url = URL.createObjectURL(blob);
      const link = document.createElement('a');
      link.href = url;
      link.download = filename.replace(/[\/:*?"<>|]/g, "");
      document.body.appendChild(link);
      link.click();
      document.body.removeChild(link);
      URL.revokeObjectURL(url);
    }

    function downloadData() {
      let text = userKey.join(",") + "\n" + userData.join(",") + "\n\n";
      text += "作品描述,点赞数,评论数,收藏数,分享数,下载链接\n";
      aweme_list.forEach(item => {
            text += ['"' + item.desc + '"', item.diggCount, item.commentCount,
                item.collectCount, item.shareCount, item.url].join(",") + "\n"
      });
      txt2file(text, userData + ".csv");
    }

    function interceptResponse() {
      const originalSend = XMLHttpRequest.prototype.send;
      XMLHttpRequest.prototype.send = function () {
            const self = this;
            this.onreadystatechange = function () {
                if (self.readyState === 4) {
                  if (self._url.indexOf("/aweme/v1/web/aweme/post") > -1) {
                        var json = JSON.parse(self.response);
                        console.log(json.aweme_list);
                        let post_data = json.aweme_list.map(item => Object.assign(
                            {"desc": item.desc},
                            {
                              "diggCount": item.statistics.digg_count,
                              "commentCount": item.statistics.comment_count,
                              "collectCount": item.statistics.collect_count,
                              "shareCount": item.statistics.share_count,
                            },
                            {"url": item.video.play_addr.url_list}));
                        aweme_list = aweme_list.concat(post_data);
                  }
                }
            };
            originalSend.apply(this, arguments);
      };
    }

    function scrollPageToBottom() {
      const SCROLL_DELAY = 1000; // Adjust the delay between each scroll action (in milliseconds)
      let scrollInterval;

      function getScrollPosition() {
            return scrollY || pageYOffset || document.documentElement.scrollTop || document.body.scrollTop || 0;
      }

      function scrollToBottom() {
            scrollTo(0, document.body.scrollHeight);
      }

      function hasReachedBottom() {
            return getScrollPosition() >= (document.body.scrollHeight - innerHeight);
      }

      function scrollLoop() {
            if (!hasReachedBottom()) {
                scrollToBottom();
            } else {
                console.log("Reached the bottom of the page!");
                clearInterval(scrollInterval);
            }
      }

      function startScrolling() {
            scrollInterval = setInterval(scrollLoop, SCROLL_DELAY);
      }

      let button = createButton('开启自动下拉到底', '60px');
      button.addEventListener('click', startScrolling);
    }

    // To start scrolling, call the function:
    scrollPageToBottom();
    interceptResponse();
    window.onload = () => {
      extractDataFromScript();
      let button = createButton("下载已加载数据", "81px");
      button.addEventListener('click', downloadData);
    };

})();

```

后面计划再开发crx插件版本,但是目前测试插件中无法触发xhr方法,只能获取到初始数据,还在研究中...

xxmdmst 发表于 2023-7-28 11:12

关键代码之一:
    function extractDataFromScript() {
      const scriptTag = document.getElementById('RENDER_DATA');
      if (!scriptTag) return;
      let data = JSON.parse(decodeURIComponent(scriptTag.innerHTML));

      for (const prop in data) {
            if (data.hasOwnProperty(prop) && prop !== "_location" && prop !== "app") {
                const user = data;
                let userInfo = user.user.user;
                userData.push(
                  userInfo.nickname, userInfo.followingCount, userInfo.mplatformFollowersCount,
                  userInfo.totalFavorited, userInfo.uniqueId, userInfo.ipLocation,
                  userInfo.age, '"' + userInfo.desc + '"', userInfo.awemeCount, "https://www.douyin.com/user/" + userInfo.secUid
                );
                let post_data = user.post.data.map(item => Object.assign({"desc": item.desc}, item.stats,
                  {"url": "https:" + item.video.playAddr.src}));
                aweme_list = aweme_list.concat(post_data);
            }
      }
    }

xxmdmst 发表于 2024-6-13 22:34

androuser 发表于 2024-6-13 11:01
楼主,我的进去没有看到那些下载选项啊

你先确认你安装了最新版。
这个插件,近半年是不可用的。
有问题请在新文中回复:https://www.52pojie.cn/thread-1934421-1-1.html

zxh188300047 发表于 2023-7-28 12:34

看着挺好,先用用看

VGT-dy 发表于 2023-7-28 12:39

多多学习,才能进步

RYJK 发表于 2023-7-28 12:40

有去水印下载不的

qtqydyuy 发表于 2023-7-28 12:44

保存了待用,谢谢分享

salend 发表于 2023-7-28 12:46

这个得赞了 牛

izhuol 发表于 2023-7-28 12:55

学习学习:lol

xu688 发表于 2023-7-28 13:43

终于不用一个一个点着下了,感谢楼主分享爱

CloudLove 发表于 2023-7-28 14:05

感谢楼主,这下方便了很多
页: [1] 2 3 4 5 6 7
查看完整版本: 【油猴脚本】抖音用户主页数据下载