BusLineDataSpider2——轻松拥有最新的BusLine线路数据 4月2日更新（转自hipda)

xiaoyu0314 · 发表于 2009-4-2 10:57

感谢作者，原帖地址http://www.hi-pda.com/forum/view ... &extra=page%3D1

2009年4月2日更新说明

1 更新网页解析规则，解决个别城市无法顺利抓取的问题。

2009年4月1日更新说明

迫于Palmer们强大的压力，熬夜推出全新版本。为了节约时间，没有制作界面，请谅解。
时间仓促，未能仔细测试，欢迎指正。感谢各位朋友的支持。

-----------------------------------------------------------------------

2009年03月25日更新说明

1 因公交数据源更新，相应地调整了数据抓取路径。

最近因为8684更新了数据访问路径，导致了BusLineDataSpider无法正常抓取数据。
今晚忙里偷闲，赶着更新了一下，欢迎大家测试。

-----------------------------------------------------------------------

2008年12月12日更新说明

1 增加一个配置文件用户可以通过配置相关属性在生成时取消某些线路信息如公交公司乘车价格
2 将同类型的线路生成在一起方便修改路线文件

-----------------------------------------------------------------------

2008年12月5日16点 build20081205 更新说明

这个版本开放了“软件运行日志”功能，软件的运行流程都会被写入到日志文件。这一功能对普通使用者意义不大，主要是开发者用来对软件进行纠错。但是考虑到软件在抓取数据时，可能会因为数据格式异常而导致抓取中止。因此如果大家在抓取数据时出现异常，可以把日志文件发给我供我参考纠错。打开这一功能的方法是：在BusLineDataSpider.exe的同一个目录下建立一个名为“Debug”的文件夹即可。生成的日志文件就会被写到“Debug”文件夹内，软件每一次运行都会生成一个日志。没有“Debug”文件夹的话，则此功能自动关闭。

很多朋友回复说在抓取时出现了“在抓取XXX线路时，访问无效网址”这一错误提示，这一问题主要是由于提供数据源的网站出现了非常规格式的数据，导致了以前的解析策略不能正常工作，这一问题留在下一版本解决。暂时的解决办法就是调整抓取范围，跳过有问题的线路，继续抓取。见谅。

-----------------------------------------------------------------------

1 作用
自动生成BusLine所使用的公交线路数据，从而再也不用为找不到最新的BusLine数据而发愁。

2 工作原理
从网络上自动抓取数据，按照BusLine规定的格式生成txt文件。

3 运行条件
需要.Net2.0 Framework运行库的支持。如果下载后发现程序不能运行，请前往以下地址下载：
http://www.onlinedown.net/soft/38669.htm

4 使用方法
1）城市名称请填写城市拼音，如beijing。
2）线路范围表示想获取的线路数据的范围值，如想获取1路到200路的数据填写1-200，点击“按范围抓取”按钮。如果想获取整个城市的公交数据，一般情况下填写1-999即可。从1搜索到999，如果网速不够快将耗费不少时间，请耐心等待。
3）线路名称表示如果有如“机场专线”，“高新专线”这种不带号码的公交车，它的数据将不会被前一种方式所获得。请把此类公交名称填写到“线路名称”框内，点击“按名称抓取”即可。
4）代理服务器不明白什么意思的朋友不填即可。
5）一切准备就绪，请点击“按范围抓取”或者“按名称抓取”，然后耐心等待。在抓取的过程中这两个按钮不再起作用，如果想修改参数重新抓取请先点击“停止抓取”按钮。
6）抓取完毕会弹出操作完毕的提示框，此时点生成文件即可。生成的文件和程序在同一目录下。
7）文件生成好后，还不能被BusLine直接读取，请使用“BusFile Builder”这个软件生成PDB文件。
8）在抓取数据的过程中，成功获取到的线路会显示在成功列表里，如果网络连接超时将会把当前抓取的线路放入到失败列表，在其他线路抓取完毕后会对其重新抓取，直到全部成功。等不及的朋友请点击“停止抓取”。

5 相关说明
1）如果提示抓取完毕但是并没有任何数据，表示没有该城市的数据信息。
2）如果抓取的线路不存在，会继续搜寻包含有此名称的其他线路。例：如果不存在“5路”，可能将会出现“55路”，“305路”车的数据。
3）根据上面的与规则，所以查询“1”路车，可能会出现“1路”，“城乡1路”，“机场1路”等数据。但是如果其中任意一条数据在读取时连接超时，范围值“1”将被加入“失败列表”，有关“1”的线路将会被全部重新抓取。
4）在软件运行过程中，每一次抓取的数据都会和以前的数据合并在一起，因此并不会因为重新抓取而清空上一次的数据。如果想清空数据重新抓取，请关闭软件再重新运行。
5）软件在运行过程中，无论抓取多少次，所抓取到的数据都保存在内存中，只有点击“生成文件”按钮，才会被写入硬盘。如果因为网速太慢而范围值太大，等待过久，请及时保存文件，避免数据丢失。
6）如果在运行过中，如抓取1-100，中途在抓取到50时，因为弹出“网络连接超时”对话框从而导致抓取不能继续进行，此时可以调整范围值，将其修改为50-100，再重新点击抓取按钮。如果不修改范围值，将会重头开始。
7）如果软件运行崩溃或者生成数据格式有误，请发邮件跟我联系，谢谢大家的反馈。所有数据均来自网络，线路名称本身正确与否概不负责。
8）线路数据均来自网站http://www.8684.cn
9）BusFileBuilder不能正常运行的朋友请参看本页30楼的办法，我没测试过，不保证一定成功。

6 广而告之
《回拨助手》：http://bbs.maxpda.com/viewthread.php?tid=159100

7 感谢在软件开发过程中所有帮助过我的朋友

-----------------------
小超
gmail.com#ourloveliness(#左右交换即可 #即@)
2008-12-04
截图.gif

我在运行时是在dos下的界面，与截图不符，截图是旧版本的，但是一样能用，只是不能选线路范围了，而是把线路全部抓取出，请大家测试

[ 本帖最后由 xiaoyu0314 于 2009-4-2 16:26 编辑 ]

xiaoyu0314 · 发表于 2009-4-2 11:00

沙发是必须自己的

xiaoyu0314 · 发表于 2009-4-2 11:01

板凳也不能放过，不能把机会留给别人

bathy16 · 发表于 2009-4-2 15:25

还好,没跟我抢地板

xiaoyu0314 · 发表于 2009-4-2 16:04

本来我也想抢的，后来一想，做人要厚道呀

xiaoyu0314 · 发表于 2009-4-2 16:28

我在哈尔滨，就先发上哈尔滨的公交线路吧

stephone2031 · 发表于 2009-4-10 21:44

顶上了，好东西呀

nihao6688i · 发表于 2009-4-10 21:47

谢谢您好的辛苦劳动，试用！

bingyuyc · 发表于 2009-4-11 16:39

总算又能用了。有新人也开发了一个，介面看上去不错。但运行不了。
而且又有人打击他。估计是不会更新了。

duguwei · 发表于 2009-4-19 13:42

sandy6675 · 发表于 2009-4-26 20:14

非常感谢转帖

zhaizhangqing · 发表于 2009-5-30 17:01

支持呵呵~！

猪头王 · 发表于 2009-6-4 20:46

自己动手，丰衣足食呵呵，很强大！！！多谢楼主分享

江湖传言 · 发表于 2009-7-26 15:26

很强大！！！多谢楼主分享

phone · 发表于 2009-8-2 23:56

楼主，能不能帮忙给做一下：
上海，天津，北京，广州，深圳，这几个城市的公交数据？
我这里用BusFileBuilder的时候总出现错误，谢了。

mlemon · 发表于 2009-8-6 21:41

相当不错，很好用，谢谢

songliangong · 发表于 2009-8-7 01:27

很强大！！！多谢楼主分享

geniusjack45 · 发表于 2010-1-7 16:45

太谢谢了，现在不知还好不好用，试试。。。

xxcc · 发表于 2010-5-28 17:08

不顶不行啊！太好了！！！搂住乃好大好大好的人啊！！

fulpurple · 发表于 2011-2-15 20:15

请试下合肥
hefei
抓取都没有问题，但生成PDB的时候，说错误6，溢出

账号		自动登录	找回密码
密码			加入我们

[PalmOS软件] BusLineDataSpider2——轻松拥有最新的BusLine线路数据 4月2日更新（转自hipda)

回复楼主1# xiaoyu0314 的帖子

[PalmOS软件] BusLineDataSpider2——轻松拥有最新的BusLine线路数据 4月2日更新（转自hipda)

回复 楼主1# xiaoyu0314 的帖子

回复楼主1# xiaoyu0314 的帖子