机器学习、深度学习和神经网络

深度学习的基础是神经⽹络,神经⽹络本质上是⼀种⽆须事先确定输⼊输出之间映射关系的数学⽅程。
深度学习的核⼼是神经⽹络,它可以被看作是由许多个简单的神经元组成的⽹络。

机器学习在理论上可以看作是统计学在计算机科学上的⼀个应⽤。在统计学上,⼀个⾮常重要的内容就是拟合和预测,即基于以往的数据,建⽴光滑的曲线模型实现数据结果与数据变量的对应关系。(有线性回归的味道)

BP神经⽹络(反向传播神经⽹络)是⼀种按误差反向传播(简称误差反传)训练的多层前馈⽹络,它的基本思想是梯度下降法,利⽤梯度搜索技术,以期使⽹络的实际输出值和期望输出值的误差均⽅差最⼩。

机器学习包含了神经网络这种技术,而深度学习则是神经网络的一种特殊形式或进阶版,它使用了深层神经网络来进行学习和预测。

通用人工智能”( ArtificialGeneral Intelligence, AGI)

标签

Linux 查找大文件

  1. 使用du(磁盘使用)命令来查找占用空间最大的目录:

    sudo du -h / --max-depth=1 | sort -h

    这个命令会列出根目录下每个一级子目录的大小,并通过sort命令进行排序,-h标志表示“人类可读”的格式(即使用KB、MB、GB作为单位)。--max-depth=1限制了du命令只在一个层级深度内工作。

  2. 为了找到最大的文件,你可以使用find命令:

    sudo find / -type f -exec du -h {} + | sort -rh | head -n 20

    这个命令会搜索根目录下所有的文件,并显示它们的大小。sort -rh将结果按照人类可读的格式逆序排序,head -n 20将只显示最大的前20个文件。

Redhat 9.4升级到9.5以后启动速度很慢的处理方法

我是在VirtualBox 7.0里运行的Redhat 9.4,之前速度一直很好,为了部署DeepSeek,执行了升级任务,结果升级到了9.5版本,这个版本更新幅度比较大,可是重新启动后,启动速度太慢了,无法忍受,之后切换回原来的旧版9.4.

标签

Lakehouse、数据湖、数据库

Lakehouse可以翻译为湖仓一体。这个翻译准确地传达了Lakehouse的核心概念,即将数据湖(Lake)与数据仓库(data warehouse)的优势结合在一起,形成一个统一的数据处理环境。

Lakehouse架构旨在解决数据湖和数据仓库各自的局限性。数据湖以其灵活性和对多种数据格式的广泛支持而著称,但缺乏数据治理和查询优化能力。而数据仓库则提供了强大的数据管理和分析能力,但其扩展性和灵活性较差,尤其在处理非结构化数据时表现不佳。Lakehouse通过结合这两者的优势,为用户提供了一个既灵活又强大的数据处理平台。

因此,将Lakehouse翻译为“湖仓一体”是恰当的,这个翻译既符合Lakehouse的英文原意,又准确地表达了其作为数据湖和数据仓库结合体的特点。

关于AAA 和AAAAA

AAA可以通过多种协议实现认证、授权和计费。

AA 审计和访问控制。

标签

红帽9.4中安装和使用容器podman-docker

红帽从 RHEL 9 中删除了 Docker 容器引擎和 docker 命令。从8开始增加dnf,相当于升级的yum
podman 不支持的 docker 命令选项包括 network、node、plugin(podman 不支持插件)、rename(podman 使用 rm 和 create 来重命名容器)、secret、service、stack 和 swarm(podman 不支持 Docker Swarm)。容器和镜像选项用于运行直接在 podman 中使用的子命令。

安装 container-tools meta-package:
# dnf install container-tools

可选:安装 podman-docker 软件包:
# dnf install podman-docker

拉取 rhel 容器镜像:
$ podman pull rhel
//从返回的列表中选择一个下载到本地库

查看本地镜像:
$podman images

EXCEL 清除空回车符和空格的方法

使用Excel中的CLEAN函数清除非打印字符,如:空回车符。

删除空格,全选后,用替换的方法即可。还有搜索 ctrl+ J ,然后清除。

 

标签

恢复备份的常见问题

1.磁盘模式是GPT的大容量磁盘,一般都是大于2TB的单个分区,有的可能10TB或者更大。

恢复时要分步执行恢复任务,先恢复MBR部分,再恢复系统和数据部分,注意分区显示方式必须Linux方式,才有LVM卷,必须手工。执行异机还原。

不然恢复以后无法启动,启动后就是dracut 提示符。

不然就是分区大小不对,只能识别2TB,大硬盘识别错误无法启动。

标签

Grub2 和 dracut 修复启动项

可能的错误:

  1. Grub引导配置错误,grub指向的磁盘UUID不存在/错误。 此时需要进入recovery mode,在终端中输入以下指令以重新生成grub配置表。

grub2-mkconfig -o /boot/grub2/grub.cfg

      2. Grub配置无误,内核引导阶段出错。需要进入recovery mode重新生成initramfs

dracut --regenerate-all --force

标签

使用diskpart命令取消/增加分配盘符

使用diskpart命令取消/增加分配盘符,步骤如下:
打开命令提示符并以管理员身份运行。
输入“diskpart”并按回车键。
输入“select disk x“
输入“list volume”查看分区列表,找到要取消分配盘符的分区。
输入“select volume x”(x为分区号)选择分区。
输入“remove letter=x”(x为要取消的盘符)取消分配盘符。
如果需要指定盘符:assign letter=E

标签
订阅