代码拉取完成,页面将自动刷新
同步操作将从 BigBao/artipub 强制同步,此操作会覆盖自 Fork 仓库以来所做的任何修改,且无法恢复!!!
确定后同步将在后台操作,完成时将刷新页面,请耐心等待。
const mongoose = require('mongoose')
const CronJob = require('cron').CronJob
const AsyncLock = require('async-lock')
const constants = require('./constants')
const models = require('./models')
const config = require('./config')
const logger = require('./logger')
const ArticlePublisher = require('./lib/ArticlePublisher')
const StatsFetcher = require('./lib/StatsFetcher')
// mongodb连接
mongoose.Promise = global.Promise
if (config.MONGO_USERNAME) {
mongoose.connect(`mongodb://${config.MONGO_USERNAME}:${config.MONGO_PASSWORD}@${config.MONGO_HOST}:${config.MONGO_PORT}/${config.MONGO_DB}`, { useNewUrlParser: true })
} else {
mongoose.connect(`mongodb://${config.MONGO_HOST}:${config.MONGO_PORT}/${config.MONGO_DB}`, { useNewUrlParser: true })
}
class Runner {
constructor() {
}
async run() {
// 任务执行器
const taskLock = new AsyncLock()
const taskCronJob = new CronJob('* * * * * *', () => {
if (!taskLock.isBusy()) {
taskLock.acquire('key', async () => {
let task = await models.Task.findOne({
status: constants.status.NOT_STARTED,
ready: true,
checked: true
})
if (!task) return
logger.info('Publish task started')
const executor = new ArticlePublisher(task)
await executor.start()
logger.info('Publish task ended')
})
}
})
taskCronJob.start()
// 获取环境变量
let errNum = 0
let updateStatsCron
while (errNum < 10) {
updateStatsCron = await models.Environment.findOne({ _id: constants.environment.UPDATE_STATS_CRON })
if (!updateStatsCron) {
await setTimeout(() => {}, 5000);
} else {
break;
}
}
// 数据统计执行器
const statsLock = new AsyncLock()
const statsCronJob = new CronJob(updateStatsCron.value, () => {
if (!statsLock.isBusy()) {
statsLock.acquire('key', async () => {
const tasks = await models.Task.find({
url: {
$ne: '',
$exists: true
}
})
for (let i = 0; i < tasks.length; i++) {
logger.info('Stats fetch task started')
let task = await tasks[i]
const executor = new StatsFetcher(task)
await executor.start()
logger.info('Stats fetch task ended')
}
})
}
})
statsCronJob.start()
}
}
module.exports = {
Runner,
}
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。