可以使用Puppeteer -Thingiverse单击链接单击链接

Question

我正在尝试自动化在Thingiverse上下载多个文件的自动化。我随机选择一个对象。但是我很难找到所需的链接，单击然后下载。有人遇到过我可以得到一些帮助吗？

我尝试了其他几种变体。

import puppeteer from 'puppeteer';

async function main() {
    const browser = await puppeteer.launch({
        headless: true,
    });

    const page = await browser.newPage();
    const response = await page.goto('https://www.thingiverse.com/thing:2033856/files');
    const buttons = await page.$x(`//a[contains(text(), 'Download')]`);
    if(buttons.length > 0){
        console.log(buttons.length);
    }  else {
        console.log('no buttons'); 
    }
    await wait(5000);
    await browser.close();
    return 'Finish';
}
async function wait(time: number) {
    return new Promise(function (resolve) {
        setTimeout(resolve, time);
    });
}

function start() {
    main()
        .then((test) => console.log('DONE'))
        .catch((reason) => console.log('Error: ', reason));
}

start();

下载页面

代码

Answer 1

我能够让它上班。
选择器为：a [class^=“ thit file__download”]

puppeteer是：const puppeteer = require（'puppeteer-extra'）;

在等待页面之前。 goto（）我始终建议设置视口：

await page.setViewport({width: 1920, height: 720});

设置之后，更改等待Page.goto（）具有waituntil选项：

const response = await page.goto('https://www.thingiverse.com/thing:2033856/files', { waitUntil: 'networkidle0' }); // wait until page load

接下来，这是一个非常重要的部分。您必须执行所谓的waitforselector（）或waitforfunction（）。

我在const响应之后添加了这两个代码行：

await page.waitForSelector('a[class^="ThingFile__download"]', {visible: true})

await page.waitForFunction("document.querySelector('a[class^=\"ThingFile__download\"]') && document.querySelector('a[class^=\"ThingFile__download\"]').clientHeight != 0");

接下来，获取buttons。对于我的测试，我只是抓住按钮 href。

const buttons = await page.$eval('a[class^="ThingFile__download"]', anchor => anchor.getAttribute('href'));

最后，请勿检查此变量的.length。在这种情况下，我们只是返回href值，即String。您将获得Promise的ElementHandle时，您将尝试获得按钮：

const button = await page.$('a[class^="ThingFile__download"]');
console.log(button)
if (button) { ... }

如果您更改该page。$为页面。$$，您将获得array＆lt; elementHandle＆gt;的Promise，并且将能够使用.length那里。

const buttonsAll = await page.$('a[class^="ThingFile__download"]');
console.log(buttonsAll)
if (buttons.length > 0) { ... }

希望这会有所帮助，如果您无法弄清楚，如果我有时间使它看起来更好，我可以稍后发布我的全部资源。