网址导航 在线音乐 免费电影 美女图片 笑话漫画 免费代理 电视影视 小说阅读

八零后论坛

 找回密码
 注册
搜索
查看: 735|回复: 6

杰奇linux采集器易大师,基本能用且速度还行

[复制链接]

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2020-12-31 13:34:02 |显示全部楼层
       推荐一下易读小说系统,这是一个java编写的web程序,功能模块和文件目录结构基本参照杰奇。值得在意的是官方有一个配套的采集器脚本,也是java编写,也正因为如此,这个脚本在linux下也可以正常运行。我在本地以jieqi1.8作为程序,并且进行安装搭建,最后配置了jdk1.6,随后采集器基本正常采集。不过也出现了封面图片采集了但不显示,以及目录结构文件没有自动生成的问题,但这是我第一次使用可能什么地方没有配置正确。这套可以在linux下运行的采集器脚本,叫做易大师采集器,兼容关关采集器规则,且windows和linux下都可以运行,运行的条件就是java环境,采集的速度还比较快。但是官方没有详细的使用教程,一开始接触真的会懵逼好半天,今天下午尝试安装运行了,那么就将教程整理一下。

易读小说系统官网为:www.51yd.org
我测试的系统为:CentOS6.5


详细教程:
1.首先需要准备工具,jdk1.6和采集器脚本
2.安装jdk1.6(官方是这个版本)在linux服务器进入jdk-6u45-linux-x64-rpm.bin这个文件所在目录后,
运行以下命令:


  1.     chmod +x jdk-6u45-linux-x64-rpm.bin
  2. ./jdk-6u45-linux-x64-rpm.bin

复制代码
全部执行完成后,检测是否安装成功,
运行如

  1.     java -version
复制代码
下命令: 正确的提示为:   
java version "1.6.0_45"   
Java(TM) SE Runtime Environment (build 1.6.0_45-b06)   
Java HotSpot(TM) 64-Bit Server VM (build 20.45-b01, mixed mode)

3.修改采集器配置文件,大概注解我会说明

category.ini    分类对应文件
collect.ini    采集生成设置文件
jdbc.properties    数据库连接文件
run.ini    采集规则运行文件
site.ini    网站全局信息配置文库

其中采集规则是放在rules这个目录里面
4.最后直接在采集器的目录,
运行:


  1.     sh start.sh
复制代码
这个时候,只要网站是正常安装的,信息没有错误之后,就开始正常采集了,不过值得注意的是,在全命令指令的linux系统,在安装运行之前,最好安装screen,并且新建窗口,否则可能你关闭连接,采集进程就停止了,具体指令就以下两条:
  1. yum install screen
  2. screen -S cj

复制代码
当然有些系统自带这个软件。
主要是怕自己会找不到,转载过来了
来源:https://www.ruletree.club/


338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2020-12-31 13:34:53 |显示全部楼层
进入数据库
  1. $ psql mydb
复制代码
回复

使用道具 举报

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2020-12-31 13:35:18 |显示全部楼层
替换命令
  1. update t_article set imgflag=1 where imgflag=0;
复制代码
回复

使用道具 举报

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2020-12-31 20:04:30 |显示全部楼层
  1. su - postgres
复制代码
回复

使用道具 举报

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2020-12-31 20:15:18 |显示全部楼层
  1. update t_article set imgflag=replace(imgflag,'0','1');
复制代码
回复

使用道具 举报

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2021-1-2 17:27:19 |显示全部楼层
  1. service tomcat restart
复制代码
回复

使用道具 举报

338

主题

52

好友

7241

积分

版主

Rank: 7Rank: 7Rank: 7

winnercn 发表于 2021-1-2 17:27:47 |显示全部楼层
  1. ps axu | grep java
复制代码
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

Archiver|手机版|八零后时代 ( 苏ICP备07509334号 )

GMT+8, 2021-10-26 19:51

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部