#源码推荐# “纸上烤鱼”:自建磁力搜索网站

本文地址:http://www.oyayu.com/using-zsky-and-ssbc-to-build-your-own-dht-magnet-search-engine.html
文章摘要:#源码推荐# “纸上烤鱼”:自建磁力搜索网站 ,女性如蹈汤火药石之言,机电部托辞小跑步。

下载类的网站应该是大家经常用到的工具了,特别是一些BT,PT一类的网站,最近几年比较火的小型站点一般都是磁力搜索类的,但很多网站鱼龙混杂,广告横生(网站挂广告无可厚非,但是时不时弹出令人尴尬的内容就有点儿…)。最近看到网友wenguonideshou制作并修改的源码,叫ZSKY,虽然貌似没给正式的命名,但是从demo来看,应该是“纸上烤鱼”的缩写,这个源码实际上是改自另一款很出名的源码SSBC(手撕包菜),但手撕包菜的使用说明网上一直只是流传着一些坊间的版本,作者似乎也没有过多的在维护这个项目(2年前的更新了),不过好在这次网友的修改版似乎更通俗易懂,其他不多说了,直接附上相关的说明(注:这类磁力搜索的网站实际上是利用Python爬去DHT网络中的信息,因此,基本不需要手动维护内容)

磁力搜索网站经常会检索到版权敏感的内容,请大家尊重版权所有者,将侵权内容删除。微魔呼吁:保护知识产权,人人有责!

官方说明:
在ssbc爬虫的基础上修复,现在可以7*24爬取的爬虫,修改了爬取策略,只入库音乐、电影、电子书。python实现的磁力搜索网站,代码比较烂,请轻喷!
搜索排行榜、浏览排行榜、DMCA投诉的功能未完成(其实是不想做)
和ssbc相比,没使用sphinx进行索引,而是用redis缓存访问页面,使用jieba分词,比sphinx的中文分词效果好。
模板在templates目录,模板引擎是jinja2(非常易读),编写自己的专属模板非常方便,中文版文档 http://www.oyayu.com/036/docs/jinja2/ 。
后台可以直接搜索、删除DMCA投诉的关键字,管理首页推荐关键字、用户搜索记录、查看每天爬取的资源数量、管理后台用户。
修改数据库密码后请修改manage.py里面的mysql+pymysql://root:后面的内容和simdht_work.py里面的DB_PASS
实验环境:centos7 python2.7

安装及环境配置

#下载源文件(到Github找最新版下载)
tar zxvf zsky.tar.gz
systemctl stop firewalld.service  
systemctl disable firewalld.service   
systemctl stop iptables.service  
systemctl disable iptables.service  
setenforce 0  
sed -i s/"SELINUX=enforcing"/"SELINUX=disabled"/g  /etc/sysconfig/selinux
#关闭selinux
cat << EOF > /etc/sysctl.conf
net.ipv4.tcp_syn_retries = 1
net.ipv4.tcp_synack_retries = 1
net.ipv4.tcp_keepalive_time = 600
net.ipv4.tcp_keepalive_probes = 3
net.ipv4.tcp_keepalive_intvl =15
net.ipv4.tcp_retries2 = 5
net.ipv4.tcp_fin_timeout = 2
net.ipv4.tcp_max_tw_buckets = 36000
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_max_orphans = 32768
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_max_syn_backlog = 16384
net.ipv4.tcp_wmem = 8192 131072 16777216
net.ipv4.tcp_rmem = 32768 131072 16777216
net.ipv4.tcp_mem = 786432 1048576 1572864
net.ipv4.ip_local_port_range = 1024 65000
net.ipv4.ip_conntrack_max = 65536
net.ipv4.netfilter.ip_conntrack_max=65536
net.ipv4.netfilter.ip_conntrack_tcp_timeout_established=180
net.core.somaxconn = 16384
net.core.netdev_max_backlog = 16384
EOF
/sbin/sysctl -p /etc/sysctl.conf
/sbin/sysctl -w net.ipv4.route.flush=1
echo ulimit -HSn 65536 >> /etc/rc.local
echo ulimit -HSn 65536 >>/root/.bash_profile
ulimit -HSn 65536
#优化内核参数,彩票控重庆时时彩:优化打开文件数
cd zsky
yum -y install wget gcc gcc-c++ python-devel mariadb mariadb-devel mariadb-server
yum -y install epel-release python-pip redis
pip install -r requirements.txt
pip install redis
systemctl start  mariadb.service 
systemctl enable mariadb.service
systemctl start redis.service
systemctl enable redis.service
mysql -uroot  -e"create database zsky default character set utf8mb4;" 
mysql -uroot  -e"set global interactive_timeout=31536000;set global wait_timeout=31536000;set global max_allowed_packet = 64*1024*1024;set global max_connections = 10000;" 
python manage.py init_db
#建表
python manage.py create_user
#按照提示输入用户名、密码、邮箱
nohup gunicorn -k gevent --access-logfile zsky.log --error-logfile zsky_err.log  manage:app -b 0.0.0.0:80 --reload>/dev/zero 2>&1&
#开启网站访问,访问日志是当前目录下zsky.log,错误日志是当前目录下zsky_err.log
#如果不想要日志 就运行下面这条命令
#nohup gunicorn -k gevent manage:app -b 0.0.0.0:80 --reload>/dev/zero 2>&1&  
nohup python simdht_worker.py  2>&1&
#开启爬虫并写日志,如果爬虫有问题请提交日志文件nohup.out给我

现在应该能访问http://IP 了,解析域名即可完成部署
后台地址http://IP/admin

#开机自启动
chmod +x /etc/rc.d/rc.local
echo "systemctl start  mariadb.service" >> /etc/rc.d/rc.local
echo "systemctl start  redis.service" >> /etc/rc.d/rc.local
echo "cd /root/zsky" >> /etc/rc.d/rc.local
echo "nohup python simdht_worker.py >/dev/zero 2>&1&" >> /etc/rc.d/rc.local
echo "nohup gunicorn -k gevent manage:app -b 0.0.0.0:80 --reload>/dev/zero 2>&1&" >> /etc/rc.d/rc.local

You May Also Like

About the Author: 微魔

小微魔,大智慧!

1 Comment

发表评论

电子邮件地址不会被公开。 必填项已用*标注

重庆时时彩杀号定胆 幸运农场3.10.16 幸运农场开奖走势图 重庆幸运农场几点开奖 幸运农场计划手机软件
幸运农场中3 重庆快乐十分开奖官网 幸运农场复式玩法 重庆幸运农场微信走势 重庆幸运农场助赢
幸运农场开奖时间 重庆幸运农场每天几点开始 幸运农场遗漏大数据 cf幸运玩家2017 大乐透胆拖中奖规则图
重庆幸运农场一天开多少期 时时彩平台 重庆幸运农场主题店 幸运农场单注多少钱 幸运农场能在线购买么
重庆快乐10分计划 河北11选5前三直技巧 内蒙古快三走势图下载安装 广东快乐十分中奖金额 贵州快3走势图图表和置
彩票双色球杀号 江苏十一选五开奖 澳门赌场网站 贵州快三前五天数据 香港六合彩免费资料特码
幸运28单双模式 北京pk10杀号网页 金7乐所有磨图 快三玩法技巧规律 重庆时时彩计划软件
大乐透软件 天津11选5推荐 手搓麻将游戏 北京11选5走势图带 极速时时彩开奖号码