hello，大家好，今天又跟大家见面了，提到爬虫，大家都能想到什么？request？scrapy?hai＂y还有什么呢？大家知不知道，pandas也有一个神奇的功能，爬数据？你此刻内心的想法yi＂ding一定是这样d的？what？没逗我吧？大家一起来看一看吧！
　　pandas除了k可以读取Excel、csv文件还可以读取HTML文件，利用这个方法可以直接爬虫网页的Table表格型数据，无需敲更多的爬虫代码，简单！粗暴！
　　查看HTML结构，如果发现是下面这个table格式的，那直接可以上手开干。
　　...
　　...
　　...
　　...
　　...
　　...
　　...
　　下面我们来看下如何操作。
　　一、使用方法
　　举一个例子，拿wiki百科上的各国家收入的页面抓取演示一下。
　　这个页面中有非常多的表格，符合我们的要求，直接使用read_html，它可以自动将网页的所有表格数据全部抓取下来。代码如下：
　　import pandas as pd
　　url = ＂https://en.wikipedia.org/wiki/Gross_national_income＂
　　tables = pd.read_html(url)
　　这里返回的tables是一个DataFrames的列表，每个DataFrame就是网页中从上到下顺序的数据表格。因此，可以用列表的切片tables[x]来提取网页指定的表格数据。
　　比如，我们对第4个表格感兴趣，那么直接：
　　talbes[3]
　　当然，上面表格看起来有点别扭，我们可以简单几个操作调整一下表结构。
　　df = tables[3].droplevel(0, axis=1)
　　.rename(columns={＂No.＂:＂No＂, ＂GDP[10]＂:＂GDP＂})
　　.set_index(＂No＂)
　　这样看起来就好多了。
　　好了，今天的文章就到这里了，如果大家喜欢这篇文章就分享给有需要的人吧！

林志玲远嫁日本后家暴等负面新闻频繁涌出，事业停滞近日回国讨债在郑某人让大家知道了娱乐圈拍摄的价格后，我们的志玲姐姐终于让我们知道了参加综艺节目的明星的价格。一集电视剧208W，一集综艺200W事件的原因是林志玲从极限挑战中收回了通知费。根据国家队双杀日本，未来12人大名单已确定10席，MVP沦为酱油男今天中国男篮33分击败日本，在日本主场两连胜全身而退。本场比赛发挥最佳的无疑是时隔两年再度回归国家队的赵睿，本场赵睿出场26分钟，投篮15中9，其中三分9中6，罚球4中3，得到27再见韩德君！中国男篮最新12人名单出炉，广东4人，周琦带伤出战北京时间11月28日，中国男篮将会再度对阵日本男篮，赛前双方各自更新大名单人员，其中日本男篮教练组不满球队第一场后卫群的表现，几乎是将所有后场球员都进行了更换。反观中国男篮这边则是时尚不分国界！日本老年人的穿搭，精致优雅不扮嫩，不输中国大妈时尚不分年龄不分国界，任何年龄段的女人都有追求美的权利，即便满脸皱纹头发花白身材不如从前，只要会打扮就能出众。对于老年女性来说，不用靠名贵的时尚款服装来博人眼球，反倒是越简单的服饰男篮世预赛，中国队10673，33分狂胜日本男篮男篮世预赛，中国队迎来了与日本队的第二战，首节比赛中国队2910，取得了19分的领先优势奠定胜局，第三节中国队曾78343领先40分，第四节初段日本曾追到相差28分，此后中国队发力世预赛中日男篮二番战评分两将满分三人低迷，后卫线不同凡响男篮世预赛第二场，中国背靠背迎来了日本，首场比赛周琦受伤后，中国男篮出现很大起伏，尤其是外线没有打开，只能靠艾伦一个人解决问题，本场中国在赵睿的带领下，有内有外，以日本的节奏击溃了宏远好消息2米20队宝迎CBA首秀阿联为他让路杜锋兵强马壮冲四连冠目前正值2122赛季CBA窗口期，不少球队坚持训练，积极保持状态，迎来12月底常规赛第二阶段的比赛的到来。近日，广东宏远的好消息不断。先是三连冠功臣威姆斯已经归队，目前还处于隔离期中国再胜日本队内大盘点中日大战落下帷幕，第二场中国队兵不血刃，再胜日本。那就来看看本场比赛中国队球员表现。中锋位置是烟雾弹，锋线迎来复苏，后卫群集体暴走。首先说说中锋，韩德君上一场的表现太拉垮，明显对不宋圭武猜想（68）宇宙大爆炸实是宇宙循环的一种表现宋圭武猜想（68）宇宙大爆炸实是宇宙循环的一种表现宇宙大爆炸是不存在的。宇宙大爆炸实是宇宙循环的一种表现。宇宙膨胀也是宇宙大循环的一种表现。宇宙的循环是一个向所有方向展开的循环，所王者荣耀新活动，金蝉做活动免费入手，攒够战令币免费获四款皮肤相信小伙伴们都知道，最近会有新英雄金蝉上线，同时还有新版本更新，那么都有哪些福利呢？赶紧来看看吧！首先就是重头戏新英雄金蝉。金蝉这个英雄目前在游戏当中已经能够体验了，将会在18号正这一次，宫崎英高或许真的要退下神坛了话又说回来了，从那座被人强行捧上去的，没有进步就是大退步摆大烂的，非常高处不胜寒的神坛上下来，为玩家们带来一款质量扎实且好玩的黑暗之魂4PLUS，好像也并不是一件特别值得可惜的事儿