大数据平台入门纲要

原创 已于 2023-09-17 17:12:58 修改 · 105 阅读 · 0 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
GEO检测
于 2023-09-17 14:26:18 首次发布
标签
#大数据
第二章 社会老年学的概念和理论框架
欢迎来到鸾姝淡月博客，专为程序员和编程爱好者打造的技术博客。我们分享编程语言趋势、开发工具、编程哲学、职业发展等，助你掌握新技术，优化技能，激发编程热情。
09-01 46
老年歧视刻板印象：把年老等同于 3D：依赖 dependent、抑郁 depressed、痴呆 demented。硬件：户外空间建筑、交通、住房；软件：社会参与、敬老社会包容、公民参与就业、信息通讯、社区支持保健服务。保持心态、运动、均衡膳食，老年人可以维持健康头脑与身体；：老年人、老年艺术家通过艺术创作活动，丰富晚年，实现老有所乐、老有所教、老有所成、老有所为。家人照料、志愿、有偿劳动、学习分享都属于老有所为；老有所为：老年人参与社会，选择可以对社会做贡献的老年生活。相较于健康老化、积极老化、成功老化，
第33篇 · Vol.1·M1：LLM 基础与 Transformer
weixin_41870061的博客
08-31 92
这个模块是整个 LLM 面试的地基：Attention 缩放、RoPE 位置编码、RMSNorm/Pre-Norm、Decoder-only 架构、KV Cache、FlashAttention、Scaling Law 与 Chinchilla 法则。算法岗必考，应用岗和工程岗也常被抽查前几题，面试官靠这几题判断你懂不懂底层。题目以 ⭐ 高频为主，几乎每场必问，要练到肌肉记忆的程度。对应学习篇 S1《大模型基础原理》，见本专栏第 3-5 篇。（核心知识点，具体到术语、数字、因果关系，不写废话）+
大数据 之 Snappy
zhixingheyi_tian的博客
08-31 172
【代码】大数据 之 Snappy。
公交车调度排班优化算法研究与实现
PixelLoom的博客
08-10 852
本文提出的公交车调度排班优化算法基于遗传算法，能够较好地处理公交车调度排班问题，使得车辆数量和运营时间得到平衡，公交车的使用效率得到了优化。在模拟的公交车路线中，使用本文所提出的算法，得到了一组较优的公交车调度排班方案。其中，车辆数量的多少会影响到公交车的行驶速度和等候时间，而运营时间的长短则会直接影响到公交车的使用效率和成本。本文基于遗传算法，通过随机生成种群、选择、交叉、变异等操作，逐步优化种群中个体的适应度，最终得到较优的公交车调度排班方案。以下是本文中所使用的Matlab代码实现，供参考。
IoT DC3 时序存储选型：四款数据库可插拔
Pnoker
08-30 296
—按设备取最近趋势、跨设备时段聚合，还是分析时多序列对齐。不同答案对应不同的数据库。定义端口，四个适配器各自对接一款时序数据库，由配置项。
美团2026年Q2财报：收入1046亿元，同比增长14.4%
TMT_XQ的博客
08-28 199
本季度，美团继续加大生态投入力度，推动行业可持续发展。进一步完善骑手福利保障体系，7月1日起，美团骑手“新职伤”保险已覆盖全国，保费由平台全额缴纳，实现每单必保、每人必保。依托美团在本地生活领域的长期积累，CatPaw提供企业级Agent开发与托管能力，帮助商家把AI落地高价值经营场景，切实提升经营效率，已在餐饮、美业、宠物医院等多个真实场景中完成验证。美团CEO王兴表示：“我们会坚定加大生态与科技投入，推动AI融入真实业务场景，以提升用户、商户体验和公司经营效率，帮大家吃得更好，生活更好。
Kafka实战 自定义Offset消费 手动Offset管理
小楼一夜听春雨，深巷明朝卖杏花
08-31 204
<think>我们根据内容生成摘要。内容主要讲Kafka消费者组的offset管理，包括earliest语义、重复消费、自动/手动提交offset、同步异步提交等。需要≤150字。</think>摘要：Kafka消费者组通过offset记录消费位置，实现宕机恢复后从指定位置继续消费。earliest仅当offset不存在时生效；已有有效offset则无效。自动提交offset可能因未提交导致重复消费，可缩短提交周期或改手动提交（同步阻塞、异步回调）降低风险。
把 Apache DolphinScheduler 变成 Agent 的“手和脚”：从调度平台到自然语言数据入口
Apache DolphinScheduler开源社区
09-02 181
李庆旺：Cisco Webex 大数据平台开发工程师、Apache DolphinScheduler Committer。从调度平台到数据入口、Agent 平台定位与架构、治理执行与验证闭环，以及能力扩展与落地准备。回到整场分享的核心，可以看到，Data Agent 并不是要取代 Apache DolphinScheduler，而是在 DolphinScheduler 已有的生产编排能力之上，改变用户进入和使用数据平台的方式。首先，调度底座不变。
Django的手机数据分析与可视化
weixin_41915110的博客
08-31 775
Django的手机数据分析与可视化系统 摘 要 本系统基于Django框架、HTML和MySQL数据库技术，构建了一个全面的手机数据分析与可视化平台。大屏内容丰富，包括品牌市场份额分布、手机价格区间分布、各维度评分分布、热门机型Top10、内存容量分布以及品牌评分与价格分析等多个模块。通过这些模块，用户可以直观地了解手机市场的整体趋势、各品牌的市场表现、手机价格分布情况、用户评分分布以及热门机型的详细信息。系统采用了先进的可视化技术，将复杂的数据以图表的形式呈现，使得数据更加易于理解和分析。 在管理功能方
基于Python的动漫分析系统设计与实现
weixin_41915110的博客
08-30 235
基于Python的动漫分析系统设计与实现 摘 要 随着我国经济的高速发展与人们生活水平的日益提高，人们对生活质量的追求也多种多样。尤其在人们生活节奏不断加快的当下，人们更趋向于足不出户解决生活上的问题，线上管理系统展现了其生命力和广阔的前景。与此同时，作为广受年轻人欢迎的娱乐方式，动漫行业也得以蓬勃发展。在此背景下，线上动漫发展愈发多元化与网络化，与电子信息技术相结合，针对目前广大用户享受线上动漫需求的线上动漫数据分析及可视化展示系统应运而生。 该系统利用Python语言、MySQL数据库，结合目前流行的
一线观察：GEO优化的真实边界与长期适配细节
weixin_45675017的博客
08-31 335
优化前，系统先行的是前置诊断，不是上来就发稿。它的四层架构——底层数据底座、AI语义算法、优化执行、数据归因，决定了它考量的不是几个月的一次性曝光，而是未来三到五年品牌在AI搜索引擎里的固定话语权。这半年，因为要给几个客户落地项目，我差不多把市面上主流的GEO工具翻了个底朝天，其中一套最触动我的，叫智擎GEO。市面上太多服务商还在拿批量发稿的旧船票，去登大模型时代的新客船，结果自然是内容不被AI采信，投进去的钱全打了水漂，数据报表更是黑箱一片，验收全靠乙方一张嘴，周期长达几个月，效果却虚无缥缈。
AWS学习笔记-安全工具服务分类汇总
NealZHANG的博客
09-02 254
当需要接受外部审计时，它能帮你高效地把上述所有服务（特别是CloudTrail和Config）产生的记录，作为“我们确实按要求做了”的证据收集和整理起来。：它不会记录历史，也不强制检查，而是像一个顾问一样，告诉你“你的账户里有闲置的资源可以省钱”或“你的数据库没有开启备份，有风险”。：比如你需要确认“现在这个安全组是否是合规的（即没开放22端口）？”，或者想查看“这个EC2实例在过去一周的配置变化历史”。：比如你需要调查“谁在昨天下午删除了这个S3桶？
每天认识一个组件：元数据湖 Apache Gravitino
最新发布
weixin_47983718的博客
09-02 292
随着大数据平台从“单一 Hive Metastore”走向“湖仓一体、多引擎、多云、多类型资产”，元数据治理正在变成平台工程的核心问题，Apache Gravitino 解决的是大数据平台进入复杂阶段后的元数据统一问题。
环比增近30%！中远海控二季度盈利强势抬升
SHCXT的博客
08-29 247
面对行业发展新趋势，中远海控表示，将围绕“高质量建设世界一流的以集装箱航运为核心的数智化供应链企业”发展愿景，积极拥抱创新变革，推进 FDE工程师前置部署，深度赋能市场开拓、客户服务、技术开发，统筹全球资源优化布局，精准匹配市场变化与客户需求，加快构建全局全链最优的智能决策和运营体系，持续锻造新的价值创造能力，不断夯实面向未来的全球竞争力，致力于为客户提供更优质稳定的全链运输服务，为股东持续创造价值。截至6月30日，公司资产负债率降至41.01%，形成“高盈利、高现金流、低杠杆”的优质财务模型。
最新大数据毕业设计选题推荐-基于大数据的电动汽车故障数据分析与可视化-大数据-Spark-Hadoop-Bigdata
IT研究室的博客
08-31 278
<think>我们只需要根据用户提供的文章内容生成≤150字的摘要。文章主要介绍了一个基于大数据的电动汽车故障数据分析与可视化系统，包括技术栈、功能、背景、意义等。摘要应简洁概括核心内容。注意控制字数。</think>基于Hadoop与Spark的电动汽车故障数据分析可视化系统，融合Spring Boot、Vue、ECharts及MySQL，实现电池数据管理、故障概览与画像分析，以可视化看板呈现健康状态与风险趋势，为故障研判提供数据支撑，并具备技术迁移价值。
MYBATIS=PLUS批量插入数据提效
datalover的专栏
08-28 382
**原因**：如果开启事务，`saveBatch` 在执行完 `flush` 后，Spring 并不会立即提交事务，而是等待方法结束才 `commit`。- **优化**：如果业务允许部分失败（或无需强事务），**去掉**该方法上的 `@Transactional`，让 `saveBatch` 内部自动提交；* **优化建议**：如果业务允许，**去掉方法上的 `@Transactional`**，让 `saveBatch` 利用自动提交模式，或者使用编程式事务来精确控制边界。
Kafka、RabbitMQ、RocketMQ 对比整理
2402_88633912的博客
08-31 406
优势：Partition 并行和批量日志写入带来高吞吐；消息按保留策略保存，天然支持回放；Consumer Group 适合多下游独立消费；与流式计算、日志和数据平台集成方便。代价：分区、副本、ISR 和消费组管理复杂；延时、优先级和复杂路由不是核心能力；消息堆积、热点分区和深度运维需要较强经验；单条业务消息的确认和重试需要更多业务设计。
大数据毕业设计实战｜Data Insight Platform：用 FastAPI + ClickHouse 打造低门槛全链路数据洞察平台
2401_87177990的博客
08-30 679
Data Insight Platform 以“低门槛、全链路、可追溯”为核心理念，打通了从数据上传、清洗、分析、挖掘到机器学习的一站式流程。平台的核心创新体现在：通过五大模块实现低门槛可视化分析；借助parent_id与构建全链路血缘追溯；基于数据规模和用户并发的智能任务分发机制；引入 ClickHouse 加速大表分析并支持降级；扩展远程数据源接入实现 SQL 聚合下推。这些设计有效提升了系统的易用性、可追溯性与性能。
【Prometheus·入门篇】Prometheus 是什么：从 Nagios 到云原生监控的演进
分享技术应用、实践场景等，评论区开放技术难题讨论，共同成长进步。
08-29 246
在云原生时代，系统从单体走向微服务，从物理机走向容器，监控的对象从几十台服务器变成了几千个 Pod。传统的监控工具（Nagios、Zabbix）在这个变化中逐渐力不从心。Prometheus 应运而生，成为了云原生监控的事实标准。本篇带你理解监控的演进史和 Prometheus 的核心定位。
摆脱实验室束缚：便携式卡尔费休微量水分检测技术与现场应用解析
Delite802的博客
09-01 192
微量水分检测的核心诉求，始终是精准、稳定、便捷、合规。A1071便携式微量水分测定仪立足成熟可靠的卡尔费休微库仑电量法核心原理，通过电路优化、结构创新、智能升级，打破了传统台式测水设备的场景局限，既保留了库仑法高精度、高重复性、低检测成本的核心优势，又实现了设备便携化、操作智能化、数据数字化的技术升级。
举重若轻的智慧
xn636568的博客
09-01 531
<think>我们只需要根据内容生成不超过150字的文章摘要。内容是围绕举重若轻的本质，需要充分准备、积累知识，善于利用工具和团队，将核心思想概括。摘要要简洁。</think>真正的“举重若轻”是用无数沉重准备换来的从容。高手懂得外包消耗战，保留底牌，只展现轻松收尾。多学知识、善用工具与团队，厚积薄发，才能遇事游刃有余。
sony md软件及驱动.rar
索尼n910驱动及软件，也能用在其他型号，请自行测试，值得怀念的东东
评论 1
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值