首页>海洋CMS教程>海洋cms宝塔定时采集教程:计划任务自动配置

海洋cms宝塔定时采集教程:计划任务自动配置

小编兔妹 2022-11-18 海洋CMS教程 59 浏览

海洋cms怎么配宝塔定时采集?这篇教程把计划任务的写法和常见坑一次讲全,刚接触海洋cms采集教程的新手照做即可。

海洋cms怎么设置宝塔自动采集,由于不少人在问这个问题故而就有了这个教程;海洋cms虽然给了脚本代码,针对刚接触海洋cms的用户们理解起来并不是那么容易了;今天就深入的细化下海洋,cms利用宝塔现实自动采集的具体环节。

第一步:获取脚本代码:

【1】接下来是海洋cms官网提供的自动采集脚本代码,我们要修改代码里面的3项后才可以使用。#!/bin/bash

########################################################
# 程序名称: 海洋cms自动采集脚本
# 版本信息:seacmsbot/ v2.0
# 发布链接: https://www.seacms.net/post-update-92579.htm
# 使用方法:直接复制代码到宝塔计划任务shell脚本内容里添加每小时任务使用
# 更新时间:2019.9.26
##########################################################
#①请修改下面的网站域名及管理目录
web_site="http://网站域名/管理目录/admin_reslib2.php"
#②请修改下面项内容为"admin_reslib2.php"里设置的访问密码(默认为系统设置的cookie密码)
web_pwd="8888e82e85bd4540f0defa3fb7a8e888"
#③下面项内容为资源站每日采集链接地址列表,请自行修改,每行一条,可添加多个,前后需添加引号。
#每日采集链接获取方法:选择"后台-采集-资源库列表",复制资源站右边的"采集每天"的链接地址,去掉?前面的内容。
web_api=(
'?ac=day&rid=1&url=https://api.iokzy.com/inc/ldg_seackm3u8s.php'
'?ac=day&rid=2&url=http://www.zdziyuan.com/inc/s_ldgm3u8_sea.php'
)
#模拟用户浏览器ua,请勿随意修改,以免被目标防火墙拦截!
web_ua="Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)
Chrome/76.0.3809.100 Safari/537.36 seacmsbot/1.2;"
#采集单页
function get_content() {
echo  "正在采集第$page页..."
#echo  " get_content: --->url:--->$1"
cResult=$(curl  --connect-timeout 10 -m 20  -k -s   -L -A "$web_ua"  "$1" )
echo $cResult | grep -q "采集"
#echo  -e  "$1n$cResult"
if [ "$?" = "0" ]; then
next_content "$cResult"
else
echo  -e "采集失败,请检查设置!n失败链接-->$1n返回信息-->$cResultn采集结束,共0页"
fi
}
#采集下页
function next_content() {
#统计数据
Result=$(echo "$1" | tr "" "n")
a=$(echo "$Result" | grep -c  "采集成功")
b=$(echo "$Result" | grep -c  "更新数据")
c=$(echo "$Result" | grep -c  "无需更新")
d=$(echo "$Result" | grep -c  "跳过")
echo "采集成功-->已更$c部,新增$a部,更新$b部,跳过$d部"
let add+=$a
let update+=$b
let none+=$c
let jmp+=$d
#检测并采集下页
next_url=${1##*location.href='}
next_url=${next_url%%'*}
#echo $next_url
if [ "${next_url:0:1}" = "?" ]
then
let page++
get_content "$web_site$next_url"
else
echo "采集结束,共$page页"
fi
}
#脚本入口
echo "海洋cms自动采集脚本开始执行 版本:v1.2"
starttime=$(date +%s)
update=0  #更新
add=0     #新增
none=0  #无变化
jmp=0  # 跳过
for url in ${web_api[@]};
do
if [[ ! -z $url ]]
then
web_param="$web_site$url&password=$web_pwd"
page=1
echo "开始采集:$url"
get_content $web_param
fi
done
endtime=$(date +%s)
echo "============================"
echo "入库-->$add部"
echo "更新-->$update部"
echo "跳过-->$jmp部(未绑定分类或链接错误)"
echo "今日-->$[none+add+update]部"
echo "============================"
echo  "全部采集结束,耗时$[endtime - starttime]秒"
prepreprepreprepreprepre

第二步:修改脚本:

【2】具体修改脚本里面的哪3项呢?接下来为你一一说来。(根据上面提供的代码信息复制到记事本或是其他html编辑器来对应修改)

#①请修改接下来的网站域名及管理文件夹

web_site="http://网站域名/管理目录/admin_reslib2.php"
prepreprepreprepreprepre

这个是要修改成你的“网站域名”和“海洋cms后台的管理文件夹”。域名各位均可理解,后台的管理文件夹这个针对初学者来说要多讲两句,首先你要能登录你的后台才可以知道你的后台文件夹。按常规做法,举例说明:假如我的后台登录网址是 www.你的域名/article/那么此处的“article”就是后台的管理文件夹,得到了管理文件夹我们直接填写到代码里就能。

海洋cms宝塔定时自动采集教程

#②请修改接下来项信息为"admin_reslib2.php"里设置的浏览密码(预设为系统设置的cookie密码)

web_pwd="8888e82e85bd4540f0defa3fb7a8e888"
prepreprepreprepreprepre

这个修改要到海洋cms系统后台得到我们的cookie密码进行替换才可以,具体环节见下图。得到自身网站的cookie密码后替换就能。

#③接下来项信息为资源站每日采集网址网址列表,请手动修改,每行一条,可加入数个,前后需加入引号。

#每日采集网址获取方法:选择";后台-采集-,资源库列表",复制资源站右边的";采集每天";的网址网址,去掉?前面的信息。

web_api=(
'?ac=day&rid=1&url=https://api.iokzy.com/inc/ldg_seackm3u8s.php'
'?ac=day&rid=2&url=http://www.zdziyuan.com/inc/s_ldgm3u8_sea.php'
)
prepreprepreprepreprepre

这个是代码里要修改的最终一项。里面是代码里预设提供的2个采集网址网址,我们要获取自身的采集网址网址加入到里面,具体获取网址网址看接下来预览图的环节操作。假如你还没加入或是不懂怎么加入采集可以借鉴协助文件-海洋cms如何加入资源库采集接口

选择";后台-采集-资源库列表",根据自身的选择去复制资源站右边的";采集当天"“采集本周” “采集所有”的网址网址,去掉?前面的信息。(鼠标放在采集当天或是本周,所有上鼠标右击复制网址就能获取采集网址)

海洋cms宝塔定时自动采集教程

比如此处是:

1http://127.0.0.1/admin/admin_reslib.php?ac=day&rid=1&url=https://api.iokzy.com/inc/ldg_seackm3u8s.php
prepreprepreprepreprepre

第二步:去掉上一步复制到的信息"?"前面的信息,结果见下,

2?ac=day&rid=1&url=https://api.iokzy.com/inc/ldg_seackm3u8s.php
prepreprepreprepreprepre

这样就得到了最终的采集网址

海洋cms怎么设置宝塔自动采集第三步:宝塔定时任务设置;

【3】直接复制代码到宝塔方案任务shell脚本,信息里加入每小时任务使用。具体操作环节见下预览图。第⑤步是把我们修改好的脚本复制粘贴到脚本信息框里就能。

海洋cms宝塔定时自动采集教程

【4】总结

总的来说就是把脚本里面要修改的几项修改完后,复制修改好的脚本到宝塔的方案任务设置下定时采集任务就可以了。任务种类不要选错。假如你对本教程不理解或是疑惑的位置可以加入社群进行讨论和询问。加入社群

这篇海洋cms采集教程到这里就收尾了,苹果cms采集教程的思路与它类似;定时采集任务跑起来之后,记得隔几天回看采集日志,有报错及时处理。