软件发布站

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
热搜: 活动 交友 discuz
查看: 655|回复: 0

小说网站介绍

[复制链接]
发表于 2017-7-19 19:32:55 | 显示全部楼层 |阅读模式
先看效果图:


        站点是精仿笔趣阁的,基于TP5实现,有后台。小说已经采集了三万本,数据库经过性能和存储调优,目前数据库占用约50GB,mysql。有独立爬虫,基于python实现,已经稳定持续运行数月。

        一、为什么做这个?又为什么出售?
        据说小说站是非常吸引流量的,于是就做了一个。本人不善运营,做好之后就放那儿自生自灭了。当然,结果就是被”灭“了。好不容易被百度收录了,之后虽然爬虫一直在运行,网站数据一直在更新,但是效果并不好。因为数据还在爬,还差10%,所以暂时不放演示地址,等好了之后 使用独立域名作为演示站。

        二、站点性能怎么样?为什么不坚持继续做?
        目前使用的服务器配置:512MB内存,60GB的硬盘,同时运行网站、数据库和爬虫。
        主要的资源占用,都在爬虫,因为爬虫需要大量的数据库读写操作,虽然小说数据库本身有优化,但本人当初的设想是,优化用户访问,因此,对于爬虫的数据库操作并没有做任何优化。而另外一方面,由于VPS的配置较低,本人力求最小化硬盘空间占用,所以,任何数据库优化带来的额外空间占用,我都尽量规避了。当然,这些都可以根据实际情况做微调。
        而网站实现,基于TP5,可以运行在PHP7上,性能还是相当强悍。而且对于复杂的数据库操作,都使用了缓存。默认支持了伪静态处理。同样为了节省空间,没有全站静态化,您可以根据自身情况考虑是否静态化,但代码中目前并未添加全站静态化代码。当然,我相信可能很少有人会去生成十个亿的静态文件吧,这也是最初不加这个鸡肋功能的原因。
        数据库方面。有的朋友可能质疑mysql处理如此大数据量的速度。之前已经提到过,做过优化,速度方面,个人觉得非常强悍,比如列表页大量的排行查询、最新发布小说等,也仅仅百来毫秒,而这还是在我那台极低配置的VPS上(看看上面的配置,相信已经是市面上能买到的最低配置了)。
        目前服务器采用的linux+nginx+mysql+php5(服务器配置过低,无法安装php7)。因此扩充性和稳定性都是不错的。
        爬虫基于python实现,也可以在linux上运行,曾连续运行一个月以上。无人值守模式,支持用户前台自动更新某个章节的内容。最大的特色就是,可以绕过百度云加速的防采集。因为最初采集过于频繁,准确地说,是有一点点频繁,平均一秒请求了5次,结果持续了一个月,被对方发现了。。。然后目标站点开启了百度云的防CC保护,于是就研究,最终绕过了百度防护,此后将采集频率降低到每秒2-3次,目前一直稳定。爬虫实现模拟多个终端,等等,性能还不错,瓶颈在数据库操作,原因已经说过,最初没打算优化,没那么大的硬盘,(早期估算,30000本小说,存储优化的结果可能是45GB-50GB,如果在其他方面优化 导致多占用硬盘,可能服务器空间就不足了)。当然,这里也可以调整的。


        不自己做。因为实在不擅长运营,也不舍得投入成本。相信看得出来,本人是花了大量心思的,php的代码也是自己写的,有较强的后台管理页面,网站的页面是精仿的,几乎一模一样。


        三、已经有很多小说源码了,为什么要自己另外搭建炉灶?
        本人何尝不想用已有的,简单改一下上线,但是又多个问题。
        网上的织梦小说站版本,织梦源码版本过于陈旧,很多漏洞没有修复,本人一个小小的软件发布站,尚且每天被无数次扫描,被试探攻击、注册机器人帐号、发垃圾帖子,何况一个大的流量站。所以,要想做好,还是要自己写一个。
        网上的其他版本,比如某著名的小说系统,源码加密了,而且还卖得很贵,我还是舍不得花这个本钱。
        网上的一些低价钱的版本,或者一些伪开源版本,下载试用之后,只想骂人。做做垃圾站可以,但是如果放上万本小说,肯定废掉,连数据库的性能这一块都无法保证,还有基于php去爬取小说,就很难把爬虫和网站放在不同的服务器了,更别说分布式爬取小说了。
        本人为了这个,前前后后试了N多版本,空余时间都在这上面了,就这样过去了二十多天,彻底放弃,决定自己写一个。


        本人不敢自夸自己的多好,一切看实际效果,本来是准备自用的,以我吹毛求疵的性格,应该足可放心,由于代码本身的bug,都是免费更新维护的。由于目前演示站的爬虫还在忙于采集数据,导致服务器有点卡,并且服务器在美国,国内访问更慢,所以就不放演示站了。等后面采集好了,再放出演示站点。如果需要看演示站点的,也可以邮件或者论坛私信给我。

再来一个截图。相信内行一看就明白了,即使是很小的一个点,本人也是尽量精益求精的。明白人看这张图里面的具体细节,就知道本人用心良苦了。。。现在很多小说站都是高仿笔趣阁的,本站是精仿,之所以敢说是精仿,至少是比他们的要好,他们的站点,小说阅读页面各种bug,本站都有仔细测试和优化。


      没有手机版。为什么不做,因为没流量。。。做手机版倒是不难,如果哪位大侠购买使用后,站点起来了,本人可以根据需求免费添加手机版。当然您也可以自行修改,这个不难,毕竟手机版的页面要简单得多。

        四、什么价钱?
        有意向再谈。请邮件给本人3516573955#qq.com。建议运行在linux,也可以运行在windows,如果不熟悉的 或者没时间维护的,本站可以代维。
        可以只买站点源码,或者站点源码+30000本小说数据,或者站点源码+30000本小说数据+爬虫代码。只买站点源码的话,不负责搭建,相信只要代码的,多多少少是懂编程的,搭建应该问题不大。其他都是可以含搭建的,爬虫代码本人是舍不得卖,但是可能大家更需要的是爬虫,所以价格会稍微高一些,但也是可以出售的。
     PHP站点源码,目前还没打算加密。但是可能还是得加密一下。如果想买来进行二次开发的,也可以提供不加密版本。不加密版本可能准备和爬虫代码捆绑销售。(出价太低的请勿扰,毕竟花了大量心血的,你非要说给我一包烟钱的价格,我倒是想做一些义务劳动,但也得讨生活不是。)


       ——无聊写了一个小说网站,欢迎捧场。








本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

手机版|小黑屋|软件发布站  

GMT+8, 2018-4-26 19:01 , Processed in 0.059887 second(s), 33 queries .

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表