Added upcoming scraper to PurgatoryX.
This commit is contained in:
parent
dfeb0c08cf
commit
f04eb72891
|
@ -37,12 +37,26 @@ function scrapeAll(scenes) {
|
||||||
}
|
}
|
||||||
}
|
}
|
||||||
|
|
||||||
console.log(release.photos);
|
|
||||||
|
|
||||||
return release;
|
return release;
|
||||||
});
|
});
|
||||||
}
|
}
|
||||||
|
|
||||||
|
function scrapeUpcoming({ query }) {
|
||||||
|
const release = {};
|
||||||
|
|
||||||
|
release.url = query.url('.bottom-info a');
|
||||||
|
release.entryId = new URL(release.url).pathname.match(/\/view\/(\d+)/)?.[1];
|
||||||
|
release.title = query.cnt('.title');
|
||||||
|
|
||||||
|
release.actors = query.all('.model-wrap li').map((el) => ({
|
||||||
|
name: query.cnt(el, 'h5'),
|
||||||
|
url: query.url(el, '.model-thumb a'),
|
||||||
|
avatar: query.img(el, '.model-thumb img'),
|
||||||
|
}));
|
||||||
|
|
||||||
|
return release;
|
||||||
|
}
|
||||||
|
|
||||||
function scrapeScene({ query }, url) {
|
function scrapeScene({ query }, url) {
|
||||||
const release = {};
|
const release = {};
|
||||||
|
|
||||||
|
@ -65,8 +79,6 @@ function scrapeScene({ query }, url) {
|
||||||
|
|
||||||
release.comment = query.cnt('.series');
|
release.comment = query.cnt('.series');
|
||||||
|
|
||||||
console.log(release);
|
|
||||||
|
|
||||||
return release;
|
return release;
|
||||||
}
|
}
|
||||||
|
|
||||||
|
@ -80,6 +92,16 @@ async function fetchLatest(channel, page) {
|
||||||
return res.status;
|
return res.status;
|
||||||
}
|
}
|
||||||
|
|
||||||
|
async function fetchUpcoming(channel) {
|
||||||
|
const res = await qu.get(channel.url, '.upcoming-info-wrap');
|
||||||
|
|
||||||
|
if (res.ok && res.item) {
|
||||||
|
return [scrapeUpcoming(res.item, channel)];
|
||||||
|
}
|
||||||
|
|
||||||
|
return res.status;
|
||||||
|
}
|
||||||
|
|
||||||
function scrapeProfile({ query }, url) {
|
function scrapeProfile({ query }, url) {
|
||||||
const profile = { url };
|
const profile = { url };
|
||||||
|
|
||||||
|
@ -101,9 +123,6 @@ function scrapeProfile({ query }, url) {
|
||||||
|
|
||||||
profile.scenes = scrapeAll(qu.initAll(query.all('.content-item')));
|
profile.scenes = scrapeAll(qu.initAll(query.all('.content-item')));
|
||||||
|
|
||||||
console.log(bio);
|
|
||||||
console.log(profile);
|
|
||||||
|
|
||||||
return profile;
|
return profile;
|
||||||
}
|
}
|
||||||
|
|
||||||
|
@ -147,6 +166,7 @@ async function fetchProfile(baseActor, context, include, retry = false) {
|
||||||
module.exports = {
|
module.exports = {
|
||||||
fetchLatest,
|
fetchLatest,
|
||||||
fetchProfile,
|
fetchProfile,
|
||||||
|
fetchUpcoming,
|
||||||
scrapeAll,
|
scrapeAll,
|
||||||
scrapeScene,
|
scrapeScene,
|
||||||
};
|
};
|
||||||
|
|
Loading…
Reference in New Issue