matlab爬虫算法知乎

A. python跟Matlab有什么区别和联系呢

联系：可以使用python语言开发Matlab软件使用的程序。

区别：

一、指点不同

1、Python：是一种跨平台的计算机程序设计语言。

2、Matlab：是美国MathWorks公司出品的商业数学软件。

二、功能不同

1、Python：是一种面向对象的动态类型语言，最初被设计用于编写自动化脚本(shell)，随着版本的不断更新和语言新功能的添加，越来越多被用于独立的、大型项目的开发。

2、Matlab：用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式环境，主要包括MATLAB和Simulink两大部分。

三、特点不同

1、Python：Python是一种代表简单主义思想的语言。阅读一个良好的Python程序就感觉像是在读英语一样。使你能够专注于解决问题而不是去搞明白语言本身。

2、Matlab： 高效的数值计算及符号计算功能，能使用户从繁杂的数学运算分析中解脱出来；具有完备的图形处理功能，实现计算结果和编程的可视化。

B. 学Python能干什么

Python可以做什么？
1）网站后端程序员：使用它单间网站，后台服务比较容易维护。如：Gmail、Youtube、知乎、豆瓣
2）自动化运维：自动化处理大量的运维任务
3）数据分析师：快速开发快速验证，分析数据得到结果
4）游戏开发者：一般是作为游戏脚本内嵌在游戏中
5）自动化测试：编写为简单的实现脚本，运用在Selenium/lr中，实现自动化。
6）网站开发：借助django,flask框架自己搭建网站。
7）爬虫获取或处理大量信息：批量下载美剧、运行投资策略、爬合适房源、系统管理员的脚本任务等。

C. 为什么用Python做数据分析

为什么用Python做数据分析

原因如下：

1、python大量的库为数据分析提供了完整的工具集

python拥有numpy、matplotlib、scikit-learn、pandas、ipython等工具在科学计算方面十分有优势，尤其是pandas，在处理中型数据方面可以说有着无与伦比的优势，已经成为数据分析中流砥柱的分析工具。

2、比起MATLAB、R语言等其他主要用于数据分析语言，python语言功能更加健全

Python具有强大的编程能力，这种编程语言不同于R或者matlab，python有些非常强大的数据分析能力，并且还可以利用Python进行爬虫，写游戏，以及自动化运维，在这些领域中有着很广泛的应用，这些优点就使得一种技术去解决所有的业务服务问题，这就充分的体现的Python有利于各个业务之间的融合。如果使用Python，能够大大的提高数据分析的效率。

3、python库一直在增加，算法的实现采取的方法更加创新

4、python能很方便的对接其他语言，比如c、java等。

Python最大的优点那就是简单易学。Python代码十分容易被读写，最适合刚刚入门的朋友去学习。我们在处理数据的时候，一般都希望数据能够转化成可运算的数字形式，这样，不管是没学过编程的人还是学过编程的人都能够看懂这个数据。

其实现如今，Python是一个面向世界的编程语言，Python对于如今火热的人工智能也有一定的帮助，这是因为人工智能需要的是即时性，而Python是一种非常简洁的语言，同时有着丰富的数据库以及活跃的社区，这样就能够轻松的提取数据，从而为人工智能做出优质的服务。

通过上面的描述，相信大家已经知道了使用Python做数据分析的优点了。Python语言得益于它的简单方便，使得其在大数据、数据分析以及人工智能方面都有十分明显的存在感，对于数据分析从业者以及想要进入数据分析行业的人来说，简单易学容易上手的优势也是一个优势，所以不管大家是否进入数据分析行业，学习Python是没有坏处的。

Python中文网，大量Python视频教程，欢迎学习！

D. python主要是做什么

1. Web开发
最火的Python
web框架Django，支持异步高并发的Tornado框架，短小精悍的flask，bottle，Django官方的标语把Django定义为the
framework for perfectionist with deadlines(大意是一个为完全主义者开发的高效率web框架)
2. 网络编程
支持高并发的Twisted网络框架，py3引入的asyncio使异步编程变的非常简单
3. 爬虫开发
爬虫领域，Python几乎是霸主地位，Scrapy/Request/BeautifuSoap/urllib等，想爬啥就爬啥
4. 云计算开发
目前最火最知名的云计算框架就是OpenStack，Python现在的火，很大一部分就是因为云计算市场近几年的爆发
5. 人工智能
MASA和Google早期大量使用Python，为什么Python积累了丰富的科学运算库，当AI时代来临后，Python从众多编程语言中脱颖而出，各种人工智能算法都基于Python编写，由其PyTorch之后，Python作为AI时代头牌语言的位置基本确立!
6. 自动化运维
问问中国的每个运维人员，运维人员必须会的语言是什么?10个人详细会给你一个相同的答案，它的名字叫Python
7. 金融分析
金融公司使用的很多分析程序、高频交易软件就是用的Python，目前，Python是金融分析、量化交易领域里用的最多的语言
8. 科学运算
97年开始，NASA就在大量使用Python在进行各种复杂的科学运算，随着NumPy，SciPy，Matplotlib，Enthought
librarys等众多程序库的开发，使得Python越来越适合做科学计算、绘制高质量的2D和3D图像。和科学计算领域最流行的商业软件Matlab相比，Python是一门通用的程序设计语言，比Matlab所采用的脚本语言的应用范围更广泛
9. 游戏开发
在网络游戏开发中Python也有很多应用。相比Lua or
C++，Python比Lua有更高阶的抽象能力，可以用更少的代码描述游戏业务逻辑，与Lua相比，Python更适合作为一种Host语言，即程序的入口点是在Python那一端会比较好，然后用C/C++在非常必要的时候写一些扩展。Python非常适合编写1万行以上的项目，而且能够很好的把网游项目的规模控制在10万行代码以内。
10. 桌面软件
虽然大家很少使用桌面软件了，但是Python在图形界面开发上也很强大，你可以用tkinter/PyQT框架开发各种桌面软件!

E. 如何利用matlab爬虫抓数据

可以自动下载网页源文件里面的数据。
clc;
clear;
warning off;
for year = 2010:2011 %年份
for season = 1:4 %季度
fprintf('%d年%d季度的数据...', year, season)
[sourcefile, status] = urlread(sprintf('http://vip.stock.finance.sina.com.cn/corp/go.php/vMS_MarketHistory/stockid/000001/type/S.phtml?year=%d&season=%d', year));
if ~status
error('读取出错！\n')
end

F. Python 会不会替代 MATLAB

MATLAB是搞科研用的，快速实现你的逻辑抽象，让你不要去管太多的细节，写出来的程序可移植性不高。java是c++的语法简化版，python是java的语法简化版。
反正就是让编程的人越来越多的从编程需要设定的各种繁琐细节中解放出来，但是想要程序运行效率高就得控制好这些细节。
python写出来的程序可移植性比MATLAB好，工作中不会用MATLAB的，但是你想要快速实现你的某一个想法然后也没必要投入到实际工作中去，用MATLAB比较好。
效率方面，MATLAB常用的那些算法效率已经经过高度优化了，比如fft。python可以调用numpy,scipy各种包，可以涵盖所有MATLAB常用的算法，语法上比MATLAB稍微繁琐点。
效率两者相当或者python更高一点。

G. Python对比Matlab，有什么决定性的优势

Python的优势：

• Python相对于Matlab最大的优势：免费。但既然你已经能用上Matlab，想必不在乎这个了。
  

• Python次大的优势：开源。你可以大量更改科学计算的算法细节。
  

• 可移植性，Matlab必然不如Python。但你主要做Research，这方面需求应当不高。

• 第三方生态，Matlab不如Python。比如3D的绘图工具包，比如GUI，比如更方便的并行，使用GPU，Functional等等。长期来看，Python的科学计算生态会比Matlab好。

• 语言更加优美。另外如果有一定的OOP需求，构建较大一点的科学计算系统，直接用Python比用Matlab混合的方案肯定要简洁不少。

• 毕竟是通用的编程语言，做做Web，搞个爬虫，编个脚本，写个小工具啥的用处广。要说非得用Matlab干么也成，只是……

Matlab的优势：


• Community. 既然你们实验室用Matlab，说明搞你们这个领域的大部分学者可能都用Matlab。交流起来必然更加方便。

• Simulink, 只能说这是个良心作品，不过题主好像用不着……

• Matlab本来号称更快，但实际上由于Python越来越完善的生态，这个优势已经逐渐丧失了。这里有一个迭代有限差分法计算2D拉普拉斯方程的对比(500x500的grid，100次迭代），可以参考一下。

Type of solution : Time taken (sec)

Python (estimate) : 1500.0

Python + Psyco (estimate) : 1138.0

Python + NumPy Expression : 29.3

Blitz : 9.5

Inline : 4.3

Fast Inline : 2.3

Python/Fortran : 2.9

Pyrex : 2.5

Matlab (estimate) : 29.0

Octave (estimate) : 60.0

Pure C++ : 2.16

数据来自PerformancePython -



• Legacy优势。你以前的代码都是Matlab写的，自己Matlab用的也熟，换成新的话，总得看一堆书吧，总得出一堆bug吧，总得踩一堆坑吧。这段时间也是Matlab的优势。或许本来这段时间可以再出一些活呢。毕竟目的是Research，这些工具都是帮忙验证idea的罢了。

H. 学python可以做什么工作

Python作为人工智能时代的主流编程语言，受到越来越多人的青睐，因此，不少人想要学习Python加入人工智能行业。

学完Python做人工智能开发

人工智能的发展潜力和钱途就不说了吧，这个是大家都知道的，Python作为人工智能时代的最佳编程语言，其魅力和发展前景毋庸置疑。

学完Python做服务器运维

运维也不陌生，最开始一批学习Python的人，就是运维和测试的在职人员，因为Python对于他们的工作起到很大的作用，因为使用Python脚本进行批量化的文件部署和运行调整都成了Linux服务器上很不错的选择。

学完Python做数据分析

在互联网上，你经常会发现自己搜索了某样东西后，系统会根据你的搜索推荐类似的品类给你，这就是大数据的强大之处。而Python所拥有的完整的生态环境十分有利于进行数据分析处理，比如，"大数据"分析所需要的分布式计算、数据可视化、数据库操作等，都可以通过Python中的十分成熟的模块完成。

学完Python做云计算开发

Python是从事云计算工作需要掌握的一门编程语言，目前很火的云计算框架OpenStack就是由Python开发的，如果想要深入学习并进行二次开发，就需要具备Python的技能。

学完Python做游戏开发

在网络游戏开发中，Python也有很多应用，相比于Lua or C++，Python比Lua有更高阶的抽象能力，可以用更少的代码描述游戏业务逻辑，Python非常适合编写1万行以上的项目，而且能够很好的把网游项目的规模控制在10万行代码以内。

所以说学完Python后从事的方向不少，对于现在想学习Python的人来说是一个非常不错的选择。

I. matlab与python区别

下面从两者各自的应用做个对比。

一、python的优势
Python相对于Matlab最大的优势：免费。国内可能不是很在乎这个，但在国外是个很关键的问题。

Python次大的优势：开源。你可以大量更改科学计算的算法细节。

可移植性，Matlab必然不如Python。但你主要做Research，这方面需求应当不高。

第三方生态，Matlab不如Python。比如3D的绘图工具包，比如GUI，比如更方便的并行，使用GPU，Functional等等。长期来看，Python的科学计算生态会比Matlab好。

语言更加优美。另外如果有一定的OOP需求，构建较大一点的科学计算系统，直接用Python比用Matlab混合的方案肯定要简洁不少。

python作为一种通用编程语言，可以做做Web，搞个爬虫，编个脚本，写个小工具用途很广泛。

二、matlab的优势
学术界大量使用matlab做仿真，做研究的话容易找到代码参考；
语法相对python更灵活一些，matlab写程序基本不用套路，所谓老夫撸matlab就一个字，干；
有simulink。有人说simulink没什么用，其实还是挺有用的，比如通信建模，另外simulink可以生产DSP或者FPGA代码，有的时候很有用。
三、两者的区别
python是一种通用语言，而matlab更像是一个平台。

四、怎样选择
如果做研究，可以matlab为主；如果做产品，可以python为主。当然也有matlab做成产品的，打包成exe什么的都不是事

J. java工程师一般用python做什么 知乎

#做网站后台
Python在网站后台这边有大量的成熟的框架，如django，flask，bottle，tornado，我曾经用过flask和django搭建了的两个网站已经上线

http://zhaixueshe.com
http://aljun.me

#写网络爬虫
Python写爬虫非常简单，库很健全

以下是我写的一些爬虫教程和心得
http://aljun.me/post/17

http://aljun.me/post/18

#科学计算
Python有三大神器：numpy,scipy,matplotlib,其中numpy很多底层使用C语言实现的，所以速度很快，我曾经用它参加各种数学建模大赛，完全可以替代r语言和MATLAB

以下是我写的科学计算简单教程
http://aljun.me/post/16

#数据挖掘，机器学习
Python
的机器学习包很多，或者自己可以试着实现机器学习算法，因为Python的类似伪代码的语法，很容易快速实现自己的想法，另外主流的机器学习算法都有成熟
的包，加上谷歌开源的TensorFlow，常用的机器学习包：scikit-learn,pattern,jieba，pybrain等等

#数据科学
最近spark，Hadoop都开了Python的接口，所以使用Python做大数据的maprece也非常简单，加上py对数据库支持都很好，或者类似sqlalchemy的orm也非常强大好用

以及剩下的码算法，玩玩树莓派什么的我就不多说了，

py的强大其实在于他能迅速的实现想法