1
KgM4gLtF0shViDH3 2018-08-26 20:10:27 +08:00 via iPhone
职业发展好快
|
2
luzhongqiu 2018-08-26 20:57:56 +08:00
经历和我很像哈哈。。建议研究下大数据套件吧! 还有 python 的性能后面会慢慢成为瓶颈
|
3
SpiderXiantang 2018-08-26 21:45:14 +08:00
我现在是在做爬虫的实习,爬虫方面自己看过 scrapy 的源码,也尝试用 aiohhtp 实现主要功能,我虽然喜欢爬虫,但是其实对破解反爬没啥兴趣,对于爬虫的化还是想自己造一些又用的轮子.和你很像的是现在在公司做的也是 etl 处理,主要是通过 livy/airflow 调度任务进行清洗打标,不过其实我对 etl 不大感兴趣,打算 9 月份回校之后去学习一些机器学习的内容,争取向那个方向靠拢.
|
4
xiaoshenke 2018-08-26 21:50:09 +08:00 via Android
调度有兴趣的话 很多可以研究啊任务调度 spark airflow 容器调度 k8s 这仨都研究通了估计能到高级研发水平
|
5
crawl3r 2018-08-27 10:26:12 +08:00
你工作才一年就学会我 5 年的东西,真不敢相信。别的不说光反编译脱壳就是别人搞三年都不见得多牛逼。不懂安卓开发你反编译的估计也是简单的小应用吧。另外爬虫做得多了,尤其涉及到有各种反爬的爬虫时,你会发现没有一种通用爬虫框架能完美适用,最好的方案是在一个足够灵活的框架上做扩展,所以对于你所谓的“爬虫框架”持怀疑态度。对于 etl 不懂就不说了。如果你对爬虫感兴趣的话,有几个方向:
1. 爬虫:研究破解各种反爬手段,包括加密、逆向、验证码之类 2. 框架开发:如果对爬虫了解够深可以自己写个牛逼的框架出来,但我见过的框架都不怎么牛逼 3. 逆向工程师:专门破解 app、脱壳 另外真羡慕你一年经验就给到 18k,看来我得准备简历了 |
6
hjw45611 2018-08-27 11:08:00 +08:00
"爬虫最深的时候接触到反编译 app,脱壳之类的"
不明白爬虫和反编译 app 有啥关联。。我是做 Android 的,没深入玩过爬虫。 如果想要从事逆向方面的话,逆向与安全都是要了解的,可以学学网络抓包、Hook 相关技术、反调试反 Hook、JNI 技术、so 文件结构、IDA 动态调试、Arm 汇编、Smali 语法、混淆加固、签名验证等等。 |
7
tony8023714 2018-08-27 11:25:23 +08:00
一年 18K....
|
8
Lateautumn OP @bestkayle 趁着年轻,多跳几次提提薪资
|
9
Lateautumn OP @luzhongqiu 哈哈,正有此意
|
10
Lateautumn OP @SpiderXiantang 加油
|
11
Lateautumn OP @xiaoshenke 最近正在看这方面的,调度这东西感觉很重要
|
12
jakejie 2018-10-14 21:08:33 +08:00
这已经很厉害了 我怀疑我来错了城市 也一直在瓶颈期 虽然做个小负责人 但是并没什么用。。还是想提升自己才是主要的。
|