设为首页收藏本站

小猪浏览器

 找回密码
 注册

QQ登录

只需一步,快速开始

查看: 6731|回复: 9

webpig的开发历史

[复制链接]
发表于 2009-10-24 01:16:27 | 显示全部楼层 |阅读模式
webpig就像一粒种子,经过了这久长的开发过程,到今天终于略有小成。
最初,我们打算做一个跟百科知识相关的论坛,后来发现收集资料和发贴比较麻烦,就像自己做一个从别的网站上转载文章到自己的论坛上的工具,这就是webpig里论坛助手的雏形。在做的过程中,发现我们遇到的很多问题其他的站长们都会遇到,就想把这个小工具开放给别的站长们用,毕竟创业是艰难的,当然过程是享受的;

一.网站管理基础工具
1.ftp工具的出现
因为要管理网站,不可少的要跟ftp工具打交道,每次都打开多个工具,很麻烦,于是就做了一个ftp文件管理工具;

2.http文件管理工具的出现;
虽然有了ftp工具,但一个成员所在的公司能上网却用不了ftp,因为公司的网管封了ftp服务,这种现象很常见。于是又做了一个http文件管理系统,可以让用户通过http的方式管理网站文件,这样对于很多一边上班一边创业的朋友算是一个帮助;

3.ftp2ftp的出现;
后来,有一次我要进行一次网站搬家,从一个服务商把网站文件搬到另一个服务商的地方去,那次把自己折腾得很辛苦,先把所有文件下载下来,然后再上传到新的网站,自己的硬盘倒腾了很久,还删除了不少地方来腾空间,于是自己又做了一个ftp2ftp的搬家工具,直接在两个站点之间建立通道,搬家的速度也快了,也不用倒腾自己的硬盘了,感觉非常好;

4.网络硬盘的出现
一个朋友跟我说,我的服务器在国外,空间没限制,但国内的很多空间是非常小的,因此站长们都需要精打细算的使用网站空间,比如图片就放在网络硬盘上,比如skydrive(提供25GB的空间)纳米盘等,而且这样的好处不久空间省了,流量也省了。考虑到这种情况,我们就进行skydrive的客户端软件开发,开发的时候也没想到什么,但开发结束后,才知道webpig是唯一的能提供skydrive客户端工具服务的软件,这让我们很高兴。

二.资料收集工具
1.网站下载
这其实就是以前的离线浏览工具,主要目的是为网站的使用者收集资料而做,它的功能就是把指定网页所在目录以下的所有网页,图片,文件,脚本都下载到本地,比如你想收集教育网的资料,可能公网进不去,就可以用这个小工具去下载;
但现在来看,这个功能越来越少人用了,主要原因有:
a.现在的网速很快,基本没有离线浏览的需要;
b.现在的网页往往都带有javascript脚本,下载后的网页显示跟原网页不一致;
c.搜集到的附件仍然需要自己去查找,效率提高得有限;

三.论坛助手工具
1.论坛助手的出现
这是最初做webpig这个工具的出发点,在上面的工作都做好之后,就开始了这个工具的设计;
也大概看了看别的采集器,使用上都比较复杂,又是脚本,又要占本地硬盘,还要准备很多周边的东西,我是一个设计者,实在是不愿意用这些工具,于是就开始自己设计了;
我对软件提出的几个指标:
a.所见即所得
  使用者看见什么网页,马上就能转载到自己的论坛博客;
b.内容的完整性
  很多新闻网站的网页采取分页体系,我们转载要能识别这种情况;
c.整站搬运
  能自动识别要采集的对象,把所有帖子都转到自己的论坛上去;

现在状态来看,这些都达到了。
在开发的时候,经常会导致重复贴的产生,于是又增加了删除重复贴的功能;
然后想到有些用户老给网站捣乱,于是又增加了删除指定用户帖的功能;

后来,发现自己下载了很多图片和文档在本地,居然不知道怎么把这些文件共享到论坛上去,于是又做了上传本地帖的功能;
再之后,有朋友问能不能做多人注册和多人在线,多人浏览,多人顶贴功能,于是也都做了进去;

又有朋友说,每次找贴也很麻烦,能不能自动的转些热门的帖子,于是又做了转载热门的功能;
相信未来还会有更多的需求;

四.八戒搜索
1.八戒搜索
有了转贴后,由于朋友谈到找贴也很麻烦,是我想到帖子内容搜索的想法,于是我们又开始琢磨设计一套定向内容搜索的功能,并取名为八戒,以配合webpig的名字;
八戒可以自动的去寻找图片,并生成bj文件;
想到很多资料是doc, rar文件,于是又增加了文档搜索;
另外看到大量的网站的搜索都使用的是google,baidu搜索,根本就不可能跟网站的更新相适应,于是又设计了八戒搜索制定网站索引,这是一个跟google, baidu一样使用方法的工具,当然功能要弱一些,但对于一个网站的导航来说那是绰绰有余了;
后来考虑到推广webpig的需要,又设计了搜索网站类型的功能,该功能就是对所有网站进行类型自动识别,看是否是论坛,phpwind, discuz;
另外还设计了email搜索,好让想推广自己网站的朋友能免费的用到这些功能,加速自己网站的建设;

2.图片管理
因为八戒能搜索图片了,生成bj文件,因此又为之配套设计了一个图片管理的功能,bj文件最好能共享出来;
因为bj文件的存在,论坛助手又在本地文件发贴中,增加了对bj文件的支持,效果看上去不错;

五.大嘴助手
1.大嘴助手
有了八戒搜索和论坛助手,网站的内容将极大的得到丰富,但如何让更多的人知道网站的存在呢,我们考虑设计大嘴助手,email群发和qq群发的功能,后来考虑到email和qq本来就有群发功能,意思不大,因此决定暂停email和qq群发功能;
大嘴助手的主要使用者是站长为了推广自己的网站,或者一个爱好灌水的用户提供服务;
使用bajie搜索提供的网站类型结构,可以展开这些论坛结构,可以转贴,发送本地文件,甚至发送message,可以发新帖,也可以顶贴,在这里希望大家谨慎使用顶贴,因为顶贴基本就是按照设定顶所有找到的帖子,量很大;

现在有了比较省力的在各个论坛上发贴的工具了,论坛助手也能增加论坛的内容了,我们又琢磨还有什么地方需要改进了,显然就是搜索引擎里的搜索排名。经过对搜索引擎排名的研究,我们发现几点:
a.论坛内容多,被收录的帖子多;
b.论坛被访问的次数多,被搜录的帖子多;
c.被别的网站引用的多,被搜录的情况也会好;
d.通过搜索引擎进入的次数多,在搜索排名会在下一次更新时靠前;这成为了我们的切入点,于是我们又开发了通过搜索引擎进入网站的小工具,其功能就是,通过google和baidu搜索关键词,从中找到能直接进入网站的链接,自动点击链接进入网站,在搜索页和网站停留的时间都可以设置;思路我们认为是正确的,但效果还不知道。其实前段时间央视炒得沸沸扬扬的google是不良网站的原因就是因为搜索词和进入网站的量突然大增导致了google成为了不良网站;这个小工具的原理跟这个事件是一致的;

六.其他
1.常用工具
提供了英汉互译,IP查询,友情链接检查服务;

发表于 2009-11-22 09:39:02 | 显示全部楼层

发表于 2010-3-21 10:27:16 | 显示全部楼层

发表于 2010-12-13 10:00:51 | 显示全部楼层
发表于 2012-12-25 00:34:22 来自手机 | 显示全部楼层
发表于 2013-9-13 15:53:20 | 显示全部楼层
发表于 2013-11-19 16:14:15 | 显示全部楼层
发表于 2013-11-19 16:14:40 | 显示全部楼层
发表于 2013-12-21 11:26:18 | 显示全部楼层
您需要登录后才可以回帖 登录 | 注册

本版积分规则

小猪内置发布规则列表
通用论坛通用CMS(后台首页添加)Blog(后台首页添加)大型网站博客/免费博客大型网站论坛/免费论坛百科小说
Discuz 6.0/6.1/7.0/7.1/7.2
Discuz NT 3.0/3.1/3.2
DiscuzX 1.0/1.5/2.0/2.5/3.0
Phpwind 6.32/7.0/7.32/7.5/8.0/8.3/8.5/9.0
Dvbbs 8.0/8.2/8.3
Vtbbs
6kbbs
dreamsun
leadbbs
dedecms 5.5/5.6/5.7
phpcms2007
supersite 7.5
uchome 2.0
powereasy6.8
phome6.0
新云CMS
phpcms v9
diypage
.....
blogcn
boblog2.11
pbblog 2.0/3.0
wordpress 2.83/2.84/2.92/3.0/3.1
zblog
...
sina博客
baidu空间
sohu博客
163博客
blogbus
hexun
cnfol
blogcn
....
5d6d
uueasy
baidu tieba
17173
qq
taobao bangpai
chinaz
A5
discuz
同城
落伍
...
hdwiki
tipask
jieqi

QQ|小黑屋|手机版|Archiver|网络小猪论坛 ( 贵公网安备 52010302000032号  

贵公网安备 52010302000032号

GMT+8, 2018-1-17 18:36 , Processed in 0.313301 second(s), 24 queries .

Powered by Discuz! X3.1

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表