不太了解,对大数据方向挺感兴趣的,
求各位在大数据领域进行讨生活的各位大佬给解解惑
不太了解,对大数据方向挺感兴趣的,
求各位在大数据领域进行讨生活的各位大佬给解解惑
|
1
刷 v2ex,看知乎,出去吹牛皮。。
|
|
3
工程方向就是维护下一些框架,做些升级,然后偏业务的就是开发业务相关逻辑,出个报表,出个数据什么的
或者给机器学习跑点数据和特征 |
|
5
写他么的 hql(;´༎ຶД༎ຶ`)
|
|
6
写大量的 SQL,偶尔写 MR
|
|
VoidChenJun 26, 2018
7
我只说我做的。。。搞下集群,部署搭建和问题检查什么的,然后跟某重本合作拿来一些业务类型的算法去做实现,优化校准,还有就是偶尔遇到一些问题(内存不够或者计算不够快或者统计数量大),去看开源拆算法搞来用,杂七杂八的。其实跟写 java 差不多啦,可能是因为毕业半年多,学的用的还比较浅(不过用的全,常用的基本都用过了)
|
|
wwekJun 26, 2018
8
数据清洗 结构化 ETL 写 HQL
|
|
9
|
|
liyerJun 26, 2018
10
爬数据,入库,去噪,打标签,分析
|
|
deepreaderJun 26, 2018
11
数据清理,做 PPT。
|
|
wtf94666Jun 26, 2018 via Android
12
我是设计 我感觉我公司的工程师们都在刷蔚蓝航线
|
|
sudozJun 26, 2018
13
总而言之就是没什么意思
|
|
SuperMildJun 26, 2018
15
据说就是洗数据……不管哪个领域,都是站在高位置的人才有差别,底下全是搬砖,体力活。
|
|
zynlpJun 26, 2018 via iPhone
16
纳尼?只有我这么忙吗,只能蹲坑的时候刷下 v2😭
搞了一个礼拜的 cuda 了,整个人都粗大了 |
|
VoidChenJun 26, 2018
19
回复的时候看了下,怎么好像基本都是数据清洗?我主要做的是 storm 流处理,基础的数据清洗就只是在源头那里架一个 bolt 过滤掉就好了(包括一些修正),怎么好像不太一样?朋友里面没有做大数据的,所以不是很清楚情况,借个楼问下。。。万一以后跳槽别人一问不知道就不好了😭
|
|
chi1stJun 26, 2018
21
写后端。。。
|
|
lastpassJun 26, 2018 via Android
22
清洗数据,造轮子。
|
|
23
坐我旁边的就是搞数据的,各种 ETL 抽取、清洗 、转换 出报表。
自从有了他,报表错误的锅再也不是我背了。。。 |
|
jasonchen168Jun 26, 2018
24
怎么转的啊?必备基本技能是什么
|
|
applehaterJun 26, 2018 via iPhone
25
比一般业务少了“改”只有“增删查”。
|
|
zhusimajiJun 26, 2018
26
sql 清洗数据---构造模型---spark 计算
|
|
lius931115Jun 26, 2018
27
写 spark SQL 和 spark Streaming 的多吗? 各位大佬们!
|
|
hackproJun 26, 2018
28
60%以上的时间在 Data Cleaning 俗称 Data Augument
|
|
29
@applehater 你这理解有问题,和 CURD 无关,大多数都是统计计算,非要关联的话就是查
|
|
superbigerJun 26, 2018
30
大量 sql,很多正则,说是计算全是过滤
|
|
arctanxJun 26, 2018
31
爬虫->mongodb->elasticsearch->网站后端
...我都不知道我算不算大数据码农 |
|
defunct9Jun 26, 2018
32
吃饭,睡觉,打豆豆
|
|
WinMainJun 26, 2018
34
我们组那位大数据童鞋用 spark 等工具处理 kafka 等地方的数据,出报表,比如 app 相关的点击率,转化率,时常统计等,还有给推荐算法搜索算法童鞋做点数据前期处理的工作。
|
|
renzongxianJun 26, 2018 via iPhone
35
用 HQL、MR 处理数据,ETL,找 bug,改 bug
|
|
fuyufjhJun 26, 2018 via Android
36
大部分是 ETL 工程师,少部分是写框架的
|
|
z3jjlztJun 27, 2018
37
sql curd 只有 r。
|