SQL，Python 和 R 语言，一个老兵三分钟给你讲明白（新人求大米）

1. 有数据库的时候，就只用SQL；

2. 没有数据库的时候，也没有条件建库的时候，1G以下的CSV可以勉强用EXCEL手工处理，1G以上的就必须用Python或者R等语言了；

3. 5个G的CSV巨型文件，如果只是统计，那么就用R。如果除了统计之外，还需要重新处理排序和归纳数据列表，那就用Python；

4. SQL是查询语言，R是统计语言，Python是多功能编程语言（可以兼任查询和统计的功能，当然也可以像JAVE和C一样编程序）；

5. 为什么会没有数据库呢？大型互联网和金融分析，需要当天或者2-3个小时内出结果，客户出于安全等考虑，不会授权给乙方数据库操作权限。所以，你只有一个SFTP上面导出的CSV文件，或者AWS CLOUD直接Read Only文件，10G数据量，2个小时内出结果，你的IT DBA不可能给你资源建库，导入数据，然后慢慢用SQL和BI工具处理，你也没有那么多时间。所以Python和R就是你的好朋友了；

6. 即使是甲方自己的人员，出于Production服务器的运行效率，也不会允许BI或者DA等人员，直接在后台数据库上跑SQL，而且很多最新的Apps后台用的也不是传统的SQL服务器，根本无法用SQL+BI的传统方法；

7. 但是对于一个数据科学家或者Data Engineer，90%还是需要SQL，毕竟那种极端案例不多，不是天天都需要996，711去处理10个G的CSV文件，90%的企业平时也还是在用SQL+BI+PPT去汇报。

wodelaoba 发表于 2020/02/13 23:13:03
对，是编程语言，但是主要是做统计用。没有人用R写程序做开发用，是不是？

哈哈，话别说那么绝，用R写程序做开发的多得去了。R可以functional programming，外加可以写object，parallel computing也是可以的，怎么就不能写程序做开发了？

补充内容 (2020-2-18 13:50):
哈哈，反对的估计是开发环境太好了，不知道有小厂根本没有好的infrastructure但是又需要用R build model所以必须要用R做开发的吧

cutekitty 发表于 2020-2-13 00:57
R是编程语言😂

对，是编程语言，但是主要是做统计用。没有人用R写程序做开发用，是不是？

R是编程语言😂

新人第一个帖子，谢谢大家给点米。

老哥我给你加米了～我也是新人，求米～

通行美国 发表于 2020-2-13 02:51
老哥我给你加米了～我也是新人，求米～

谢了！今天收你一粒米，明年还你一碗饭 :-)

大象大象大象

在AWS上面应该还是很容易的，一个小时就能出结果，而且1-7还都可以

干货顶一下！互给大米吧！