From ca2d819a77a9bf9fa5de71f11d51bc35bafac69d Mon Sep 17 00:00:00 2001 From: hesicong Date: Mon, 20 Nov 2017 22:14:08 -0600 Subject: [PATCH 1/6] Update README.md --- README.md | 4 ++-- 1 file changed, 2 insertions(+), 2 deletions(-) diff --git a/README.md b/README.md index 1110967..243d833 100644 --- a/README.md +++ b/README.md @@ -2,8 +2,8 @@ ====================== 声明：此爬虫仅用于学习、研究用途，请不要用于非法用途。任何由此引发的法律纠纷自行负责。 -# 2017-8-20：ofo和mobike区域获取代码，请见 https://github.com/derekhe/bike-crawler -# 2017-7-19：想查看当前单车实时位置？想同时得到ofo和mobike的位置信息，请看 http://www.jianshu.com/p/058d847ba297 +# ~~2017-8-20：ofo和mobike区域获取代码，请见 https://github.com/derekhe/bike-crawler~~ +# ~~2017-7-19：想查看当前单车实时位置？想同时得到ofo和mobike的位置信息，请看 http://www.jianshu.com/p/058d847ba297~~ # 2017-5-16：现在如果没有登录也可以得到真实的数据，但是比登陆后的数据少一些，一般只会返回少于5个。可以在手机上和微信小程序上进行验证。登陆后可以获得完整的数据，爬下来的数据才是可用的。 # 对登录感兴趣的，可以参考login分支。 From 2bac450b39bc5bb6d60fdaed8d5b482ef5b8c44d Mon Sep 17 00:00:00 2001 From: hesicong Date: Tue, 1 May 2018 12:52:29 +0800 Subject: [PATCH 2/6] Update README.md --- README.md | 2 ++ 1 file changed, 2 insertions(+) diff --git a/README.md b/README.md index 243d833..69c86b2 100644 --- a/README.md +++ b/README.md @@ -6,6 +6,8 @@ # ~~2017-7-19：想查看当前单车实时位置？想同时得到ofo和mobike的位置信息，请看 http://www.jianshu.com/p/058d847ba297~~ # 2017-5-16：现在如果没有登录也可以得到真实的数据，但是比登陆后的数据少一些，一般只会返回少于5个。可以在手机上和微信小程序上进行验证。登陆后可以获得完整的数据，爬下来的数据才是可用的。 # 对登录感兴趣的，可以参考login分支。 +# 对于研究用途需要数据的，可以加微信bcdata了解 + 该代码爬取摩拜单车的微信小程序接口，以便用于共享单车的分析。 相关文章： From b3c973f619d9fea07f31ccbf50b44a5a515b9e77 Mon Sep 17 00:00:00 2001 From: hesicong Date: Tue, 9 Apr 2019 21:54:33 +0800 Subject: [PATCH 3/6] Update README.md --- README.md | 11 +++++------ 1 file changed, 5 insertions(+), 6 deletions(-) diff --git a/README.md b/README.md index 69c86b2..1096bd6 100644 --- a/README.md +++ b/README.md @@ -2,12 +2,12 @@ ====================== 声明：此爬虫仅用于学习、研究用途，请不要用于非法用途。任何由此引发的法律纠纷自行负责。 -# ~~2017-8-20：ofo和mobike区域获取代码，请见 https://github.com/derekhe/bike-crawler~~ -# ~~2017-7-19：想查看当前单车实时位置？想同时得到ofo和mobike的位置信息，请看 http://www.jianshu.com/p/058d847ba297~~ -# 2017-5-16：现在如果没有登录也可以得到真实的数据，但是比登陆后的数据少一些，一般只会返回少于5个。可以在手机上和微信小程序上进行验证。登陆后可以获得完整的数据，爬下来的数据才是可用的。 -# 对登录感兴趣的，可以参考login分支。 -# 对于研究用途需要数据的，可以加微信bcdata了解 +这个仓库的版本已经很古老了，基于此爬虫的更高级的版本已经在我的《爬虫实战：从数据到产品》一书中详细讲述，请参考：https://item.jd.com/12575102.html +请注意，此书写于2018年中，当时摩拜单车还能进行爬取，2018年12月他们更新了API，每次返回的数量变少，不能实现大规模的爬取，只能实现小区域的采集。可以借鉴书中思路，自行编写程序。 + +以下是一些老黄历 +=============================== 该代码爬取摩拜单车的微信小程序接口，以便用于共享单车的分析。 相关文章： @@ -19,7 +19,6 @@ - 目录结构： * \analysis - jupyter做数据分析 From bb5ec146f7f7560cee160c65f28b765e3086f0d4 Mon Sep 17 00:00:00 2001 From: hesicong Date: Tue, 9 Apr 2019 21:57:50 +0800 Subject: [PATCH 4/6] Update README.md --- README.md | 4 ++++ 1 file changed, 4 insertions(+) diff --git a/README.md b/README.md index 1096bd6..c71563b 100644 --- a/README.md +++ b/README.md @@ -4,8 +4,12 @@ 这个仓库的版本已经很古老了，基于此爬虫的更高级的版本已经在我的《爬虫实战：从数据到产品》一书中详细讲述，请参考：https://item.jd.com/12575102.html +书中全是干货，在介绍共享单车的同时也对共享汽车的爬取思路进行了详细描述。如能购买一本进行阅读，算是对我的莫大的支持。 + 请注意，此书写于2018年中，当时摩拜单车还能进行爬取，2018年12月他们更新了API，每次返回的数量变少，不能实现大规模的爬取，只能实现小区域的采集。可以借鉴书中思路，自行编写程序。 +我的公众的微信bcdata，有问题可以加微信，但由于时间有限，恕不能一一回答，望见谅。 + 以下是一些老黄历 =============================== From e302c8b8aa671683df59e591c88f887093537fae Mon Sep 17 00:00:00 2001 From: hesicong Date: Tue, 9 Apr 2019 21:58:53 +0800 Subject: [PATCH 5/6] Update README.md --- README.md | 6 +----- 1 file changed, 1 insertion(+), 5 deletions(-) diff --git a/README.md b/README.md index c71563b..93c6157 100644 --- a/README.md +++ b/README.md @@ -10,7 +10,7 @@ 我的公众的微信bcdata，有问题可以加微信，但由于时间有限，恕不能一一回答，望见谅。 -以下是一些老黄历 +以下是一些老黄历，已经不能用了 =============================== 该代码爬取摩拜单车的微信小程序接口，以便用于共享单车的分析。 @@ -19,10 +19,6 @@ * [摩拜单车非官方大数据分析](http://www.jianshu.com/p/2a20d2a97ac0) * [摩拜单车爬虫解析——找到API](http://www.jianshu.com/p/07225f301fc4) -如果你喜欢我的文章，请赏一杯咖啡或者Star，谢谢：） - - - 目录结构： * \analysis - jupyter做数据分析 From 86e884a7be23083a8f07d1a5dad0112880829f01 Mon Sep 17 00:00:00 2001 From: hesicong Date: Mon, 22 Apr 2019 09:28:36 +0800 Subject: [PATCH 6/6] Update README.md --- README.md | 2 ++ 1 file changed, 2 insertions(+) diff --git a/README.md b/README.md index 93c6157..1510f86 100644 --- a/README.md +++ b/README.md @@ -4,6 +4,8 @@ 这个仓库的版本已经很古老了，基于此爬虫的更高级的版本已经在我的《爬虫实战：从数据到产品》一书中详细讲述，请参考：https://item.jd.com/12575102.html +书籍源代码：https://github.com/derekhe/crawler-book + 书中全是干货，在介绍共享单车的同时也对共享汽车的爬取思路进行了详细描述。如能购买一本进行阅读，算是对我的莫大的支持。 请注意，此书写于2018年中，当时摩拜单车还能进行爬取，2018年12月他们更新了API，每次返回的数量变少，不能实现大规模的爬取，只能实现小区域的采集。可以借鉴书中思路，自行编写程序。