新知一下
海量新知
6 5 1 1 4 6 2

自我反思 - 关于 Power BI 获取网页数据的教训与总结

BI使徒 | 传播商业智能的布道者 2022/09/23 23:35

内容选自知识星球会员频道,再次谢谢会员的支持。


目光所及之处,便是我们生活的牢笼边界.


获取基本面数据有多难?

之前给大家演示的自动生成Excel公式获取历史交易价格数据的示例,接下来我们来看一个关于基本面历史数据获取的案例,下载公司历年的ESP(每股收益)以及与预期的对比偏差。不同之处在于这次我们需要做的是从网上爬数。

新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结


老铁:为什么不用Power BI Web呢?

答:的确,Power BI有Web获取数据的功能,但社长只用该功能爬SharePoint数据。一般的网页现在都是防爬的了。


新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结


老铁:What?连Connection都给断了。


新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结


老铁:的确感觉是挺弱鸡的,毕竟只是BI工具,不能期望太多。那你的意思是用PAD吗?


老铁:还是挺好的,虽然目测一个下载速度是30秒,那么500个大约就是250分钟可以全部下载完毕。

答:是的,肯定有人会说还是Python爬网更有效率。的确,但是Python学习成本更高。如果你不懂编程,又不想手工下载,那么RPA可能是最好最现实的选择。


对了,还想告诉你。这个自动下载循环可以自己照顾自己,你尽管按正常模式用电脑就可以了。就在你看到这段文字的时候,RPA仍然在后台运行循环下载财报信息。时间到了,你就等着收割就完了,不耽搁。


当然,这个下载过程还是有点长。会员可以直接在星球下载成果,自己做数据分析吧。


新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结

视频为证

为了证明我所言不虚,可以自己看看视频效果。


反省什么?

老铁:社长,我觉得你文章题目是不是有些跑题,不是PBI的教训总结吗?到底是什么?

答:我们做数据分析时遇到的问题琳琳种种,很多时候,问题的层次可能超出了工具本身位面,所以我们不要让自己仅仅局限于某个单一工具,更不要成为单一工具人,而时成为会用工具的人….


老铁:好多大道理啊,知道了,你就是想说PAD有用呗,怎样可以系统学习PAD的课程?

答:如果你只是认为我在推销课程,那你没有理解我的意思。真的不是社长吹牛B,我自身就是体验了从单一工具人转向多工具使用人思维的历程,对我个人而言这种变化是深刻的,习惯打破自己的固有僵化的思维和知识,才有长足的提升,非常推荐大家花一点时间了解PBI以为的世界。当然,路是一步一步走的,所谓集腋成裘,你总得先成为工具人入个门,然后才能提升自己,成为用工具的人。加入我们的研究社,一起学习探讨吧。


分享有赏

我们星球会员的申请打赏功能开通了,凡是会员都可以通过分享星球会员加盟而获得分红具体的操作方法已经放入会员频道了,大家可以将本星球分享给更多朋友,有人通过你们的引荐加入,你和对方都有分红哦!!分享越多,得到越多(社长让利30%,分享者得70%,加入者30%)。

送你一本书

凡是9月10日之后加入星球会员的老铁,可在知识星球留言或者发邮件至邮箱中general.support@biapostle.onmicrosoft.com中(姓名、邮寄地址、电话), 可获取关于数据分析或者BI类型的书具体的书籍一本,(完全随机,包邮,书质量为九成新到七成新随机选择,亲笔签名,先到先得,送完即止)这就是本次分享,

新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结

送你一张会员优惠券

内容稳步更新中, 社群有三天免费试用期,订阅后,赶紧都看一次内容,不喜欢马上退,最多损失一些时间成本。怎么样?我没有冤人家两百块钱吧~

社长靠谱吗?

新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结

社长是微软MVP讲师,20 年+ IT与BI相关工作经历,包括数据分析软件与商务智能等培训。了解企业典型岗位对数字化转型中的痛点与定位需求。擅长数据分析,可制定等数据分析课程。长期外企工作经验,目前主要服务B端企业客户的数字化转型和培训工作,同时也从事科技写作方面的工作,有【华人机电】四大出版社背书(清华大学出版社、人民邮电出版社、机械工业出版社、电子工业出版社),质量有保证,希望将知识传递给更多有缘人,感谢大家的支持。


新知达人, 自我反思 - 关于  Power BI  获取网页数据的教训与总结

目前出版书籍列表:


²  《商业智能数据分析 –从零开始学自助式数据分析和Tableau自助式BI》京东【详细数据库书籍榜】

²  《精通商业智能数据分析 – 34示例轻松学自助式数据分析 与 Tableau》京东【助力提升效率办公软件图书精选榜】

²  《Power BI企业级分析与应用》京东【解疑答惑的办公软件书籍TOP榜】

²  《从Power BI到Analysis Services 企业级数据分析实战》

²  《从Power BI到Power Platform 低代码应用开发实战》

²  《数据可视化原理与实战 - 基于Power BI》京东【讲解透彻的数据库解析书精选榜】

²  《自助财报分析 – 基于Excel 与Power BI》 ( 预估2022.09出版)

²  《Power Automate Desktop – 零代码打造你的RPA①》 ( 预估2023.03出版)


Power Automate Desktop - 全程无对白,耐着性子看完的人瞬间获得海量数据

Power Automate Desktop课程分享 - 3.1 读取与写入Excel操作

Power Automate  & Excel - 按麻了,这么多页面我怎么导航呢?




新知精选

更多新知精选