过早客
  • 首页
  • 节点
  • 成员
  • 广告投放
  • 登录
  • 注册

互联网架构为啥这么重?

IT技术 • mjjB • 发表于 5 年前 • 最后回复来自 stargazer • 5 年前

一个简单的用户行为日志收集,需要kafka+flume+hive+hdfs

只有日志收集,没有分析的需求,最多也就一天1000万行数据,直接java(集群负载均衡)+mysql不行嘛?

加入收藏 新浪微博 分享到微信 ❤赞 2061 次点击 0 人赞 0 人收藏

打开微信“扫一扫”,打开网页后点击屏幕右上角分享按钮

共收到7条回复
BlueSandMu 5 年前 #1 赞 0

拿mysql存日志,还不如其他的,比如ES

hqmm 5 年前 #2 赞 0

那证明你这个是小公司,大公司后面kafka+flume+hive+hdfs这些大部分是不需要感知的,只管用就行了

bobohubei 5 年前 #3 赞 4

都是皮毛, 互联网公司主要是骗钱。

骗到钱了, 装装逼, 招几个技术大神, 装装门面, 本质还是骗钱的。
什么这架构,那架构, 都是忽悠外行的。 和汉芯造假没有本质区别

Vast 5 年前 #4 赞 0

1000万行数据
就不要提互联网了吧

VensonEEE 5 年前 #5 赞 0

楼上:
日志系统是互联网业务比较固定单一的系统,方案成熟,且易实施,我不知道楼主说的麻烦在哪里。
简单的、数据量小的当然简单处理就行;但有很多问题,比如数据库阻塞、横向拓展不易、数据挖掘难。一旦出现抖动,重新弄成本怕是要翻番。毕竟各个库转数据,切换是一件非常麻烦的事儿。

简单来说:虽然你自己花5块钱也能做一碗面,为啥不花6块钱买一碗超级豪华的面呢。成熟构架好处就在这儿,平均成本、边际成本算下来非常低。挂了也有人会弄。

qinjuao 5 年前 #6 赞 0

看他日志收集后续有没有规划需求啊
我印象里,行为日志收集一般es就可以了,你的数据量足以。

stargazer 5 年前 #7 赞 0

既可以是老板骗客户钱,也有可能是员工骗老板

请绑定手机号后,再发言,点击此处
Guozaoke.com—源自武汉的高端交流分享社区
相关主题
iOS 过早客没有数据,大佬们求教!
GPT-5
寻有K12教育行业软件开发经验的同学合作
你们都用哪些AI工具,求分享下~
过早客flutter版来了
亲测,鸿蒙开发奖励到手了
感觉gemini已经是一骑绝尘
分享一个拥有很多好看壁纸的插件
作为后端开发工程师,你们有中途转向机器学习/深度学习的吗?
写了个过早客的暗色插件,个人感觉很好用嘿嘿

过早客微信公众号:guozaoke • 过早客新浪微博:@过早客 • 广告投放合作微信:fullygroup50 鄂ICP备2021016276号-2 • 鄂公网安备42018502001446号