机器学习

ChatGPT 做定性研究的质量怎么样？用定量方法来研究下！附prompt

作者
ChatGPT 做定性研究的质量怎么样？用定量方法来研究下！附prompt
ChatGPT 做定性研究的质量怎么样？用定量方法来研究下！附prompt 来源：[AIGC研究社] ChatGPT 作为语言模型，最擅长的就是文本的理解和处理。这正好是用户研究工作中定性研究所需要的技能。 相信很多人自己也使用过 ChatGPT 来对访谈材料进行总结，对主观题进行分类，但总结和分类的质量怎么样，跟人类比又如何，目前还很少看到响应的定量结论。 最近发现了一篇研究( https://measuringu.com/classification-agreement-between-ux-researchers-and-chatgpt/)，作者对比了3 个人类研究员和 3 次 Chat...

ChatGPT 是怎么做的，为什么它有效

作者
ChatGPT 是怎么做的，为什么它有效
、“ 介绍神经网络的基本概念和结构，讨论训练实践、技巧以及网络规模的大小对模型能力的影响。同时介绍嵌入（Embeddings）概念，将高维数据映射到低维空间。通过本文，您将对神经网络有更深入的理解，有助于后面理解 ChatGPT 是怎么做的，为什么它有效。” 01 — 神经网络 那么我们用于图像识别等任务的典型模型实际上是如何工作的呢？当前最流行且最成功的方法是使用神经网络。神经网络发明于 20 世纪 40 年代，其形式与今天的使用非常接近，可以被认为是大脑工作方式的简单理想化。 人脑中约有 1000 亿个神经元（神经细胞），每个神经元每秒能够产生高达一千次的电脉冲。神经元连接在一个复杂的网...

探索性数据分析

作者
探索性数据分析
探索性数据分析 探索性数据分析(Exploratory Data Analysis,简称EDA)是数据分析中的一种非常重要的技术,它利用各种方法对数据集进行初步分析,以便对数据有一个直观的感受和基本的了解。 探索性数据分析是拿到原始数据后，通过技术手段帮助自己更好的理解数据、提取出「好特征」、建立初步模型的过程。 有2种方法来帮助我们理解陌生领域： graph TD A[理解陌生领域] --> B{选择方法} B -->|咨询业内人士| C[获取经验] B -->|研究数据| D[收集数据] D --> E[分析数据] E --&...

数据分析总纲

作者
数据分析总纲
数据分析大纲 数据分析概述 数据分析的概念与意义 数据分析是从大规模的数据中提取有价值的信息的过程。它具有如下的意义: 描述事物的过去,解释事物现状 探索事物之间的关系,找到隐藏的模式 做出预测,评估不同决策的后果 数据分析的基本步骤 数据分析主要包括以下基本步骤: 收集相关数据 准备和清洗数据 分析和可视化数据 建立预测模型 评估模型并提出建议 数据的分类 结构化数据与非结构化数据 结构化数据是组织良好,格式固定的数据,如数据库、电子表格中的数据。非结构化数据是无固定格式的数据,如文字、图像、音频、视频等。 定量数据与定性数据 定量数据是可以计量的数值数据。定性数据是描述属性的非数...

4.2 从GPT的原理说起

作者
4.2 从GPT的原理说起
1. chatgpt科普 https://www.modevol.com/episode/clf9d5kni0zo301mm6tkl9t87 2. GPT的原理[一句话：大力出奇迹 ] https://www.zengqueling.com/8gptdeyuanli/ 3. chatgpt的三步训练 https://www.zengqueling.com/9chatgptdesanbuxunli/ 4. 总结 4.1 chatgpt天性就是胡说八道，无中生有。 4.2 化身王语嫣 可以将语言模型类比为《天龙八部》中的王语嫣，精通武学却不会武功，需要与会武功的人配合才能发挥其才能。 懂得太多太...

4.3 【prompt教程3】将复杂的任务拆分为更简单的子任务

作者
4.3 【prompt教程3】将复杂的任务拆分为更简单的子任务
将复杂的任务拆分为更简单的子任务 正如软件工程中将复杂系统分解为一组模块化组件的良好做法一样，提交给GPT的任务也是如此。复杂的任务往往比简单的任务具有更高的错误率。此外，复杂的任务通常可以重新定义为更简单任务的工作流程，其中使用早期任务的输出来构建后续任务的输入。 1. 使用意图分类来识别与用户查询最相关的说明 对于需要大量独立指令集来处理不同情况的任务，首先对查询类型进行分类并使用该分类来确定需要哪些指令是有益的。这可以通过定义与处理给定类别中的任务相关的固定类别和硬编码指令来实现。这个过程也可以递归地应用于将任务分解成一系列阶段。这种方法的优点是，与使用单个查询执行整个任务相比，每个查询...

4.2 chatgpt的三步训练

作者
4.2 chatgpt的三步训练
chatgpt的三步训练 1【无监督学习】Pre-trained 预训练 让ChatGPT对「海量互联网文本」做单字接龙，以扩充模型的词汇量、语言知识、世界的信息与知识。使ChatGPT从“哑巴鹦鹉”变成“脑容量超级大的懂王鹦鹉”。 1.1 GPT1 GPT-1 的学习材料约 5GB。 这里 1 MB 能存 30-50 万汉字，而 1 GB 是 1024 MB。 GPT-1 的参数是 1.17 亿。 参数反映着模型大小，参数越多，模型能建构的规律就越复杂，能记忆的信息和学习的知识也就越多，相当于是大脑中神经突触的数量。高中的直线斜截式方程就 2 个参数，而它有 1 亿多个。 1.2 GPT...

4.2 GPT的原理

作者
4.2 GPT的原理
GPT的原理[一句话：大力出奇迹 ] 1.实质功能：自回归生成 单字生成：根据上文，生成下一个字。 把自己生成的字和原文组合成为上文，再生成下一个字。 输入大量的文本，人类的几千年文化沉淀。 对于同样的上文，生成概率分布。 实际上 ChatGPT 给出的结果长这样，也就是「所有字的概率分布」，「生成的下一个字」就是按照概率分布抽样得到的结果。 由于抽样结果具有随机性，所以 ChatGPT 的回答并不是每次都一样。 把问题和答案组成范例，然后再输入到模型里面。 2.泛化：预训练 自回归生成的过程可以让模型学习通用规律。 这是因为，当大量的各类文本输入后，问题和回答的通用规律的出现次数远高于某...

3.2【实操1】文本生成

作者
3.2【实操1】文本生成
1.【案例1】以‘民族企业走向世界：抖音为例’为主题，写一份思政内容大纲。 1.1讯飞星火 以‘民族企业走向世界：抖音为例’为主题，写一份思政内容大纲。 按上面的大纲，填充为一份2000字左右的讲稿。 继续 1.2chatgpt prompt： 以‘民族企业走向世界：抖音为例’为主题，写一份思政内容大纲，输出markdown格式。 按上面的大纲，填充为一份2000字左右的讲稿。 6.5 民族企业走向世界-以抖音为例 P1 （开头）大家好!今天我将跟大家分享一下民族企业走向世界的数字媒体技术,并以抖音为例进行讲述,希望能给大家带来一些启示和思考。 抖音作为一款典型的民族企业产品,自2016年推...

请不要将数据中台做成BI！

作者
请不要将数据中台做成BI！
傅一平评语：因为对于很多企业数据团队来讲，BI是唯一的业务。正文开始笔者在为企业做数据中台设计规划时，经常有 来源： 请不要将数据中台做成BI！   请不要将数据中台做成BI！ 笔者在为企业做数据中台设计规划时，经常有客户这样叮嘱。话里话外都是对“数据中台”满满的期待和对“BI”的内心的失望！为什么会这样呢？BI作为IT界“颜值担当”，那可是一直是一项叱咤风云的数据应用技术。曾几何时，为了一张报表、一个大屏，有多少企业都愿意为其“豪掷千金”！为什么现在很多企业又都对其失去了兴趣了呢？ 今天我们一起聊聊这个话题！欢迎留言区谈谈您的观点。 — 01 — Business Intellig...

成为专业数据科学家的完整路线图-我的数据之路

作者
成为专业数据科学家的完整路线图-我的数据之路
来源： 成为专业数据科学家的完整路线图-我的数据之路 成为专业数据科学家的完整路线图 沙里夫 你对高薪职业感兴趣吗？ 只需看看数据科学，它是人工智能的基础。 在当今世界，公司迫切需要熟练的数据科学家来做出更好的决策。这就是为什么我们整理了最快的路线图，以帮助您成为该领域的专业人士。 本路线图包括您开始成为专业数据科学家的所有必要资源。 在我们深入研究之前，让我们先讨论一下为什么数据科学如此重要。 决策现在基于数据，这意味着企业需要数据科学家做出更好的决策。这是一个高薪的职业，现在是跳入数据科学的最佳时机。 所以，让我们从路线图开始吧！ 第1步：学习统计学 统计学是数据科学的基础，为分析和解释数...

AI时代的学习方式

作者
AI时代的学习方式
1 明确目标 学习开始之前，明确你想要学习的具体知识或技能。例如，如果你的目标是学习Python编程，你可以问：“GPT，请分步列出Python编程的基础知识的学习提纲” 2 提出开放式问题 尽量提出开放式的问题，引导GPT提供更详细的信息。如，“GPT，Python是一种编程语言吗？”就是一个封闭问题 而：“GPT，你能告诉我Python编程语言的特点和用途吗？”就是一个开放性问题 3 追问 如果你对GPT的回答有疑问或者不理解，就应继续提问。例如，如果GPT告诉你Python是一种解释型语言，你可以追问：“GPT，你能解释一下什么是解释型语言吗？它和编译型语言有什么区别？” 4 多角度思考...

五大AI编程工具（Copilot、Tabnine、Codeium）综合评估分析-今日头条

作者
五大AI编程工具（Copilot、Tabnine、Codeium）综合评估分析-今日头条
当下主流的几个AI智能编程代码助手包括Github Copilot、Codeium、Tabnine、Replit Ghostwriter和Ama 来源： 五大AI编程工具（Copilot、Tabnine、Codeium）综合评估分析-今日头条   五大AI编程工具（Copilot、Tabnine、Codeium）综合评估分析 闪耀之星AK 一、背景介绍 咱们来聊聊AI智能编程代码助手这个话题吧。现在，越来越多的开发者都需要用到这个必备工具。当下主流的几个AI智能编程代码助手包括Github Copilot、Codeium、Tabnine、Replit Ghostw...

如何用 ChatGPT 帮你自动分析数据？. 曾几何时，很多小伙伴拿到宝贵的一手数据，却不知道如何分析。以后这种尴尬场景，会大… | by Shuyi Wang | May, 2023 | Medium

作者
如何用 ChatGPT 帮你自动分析数据？. 曾几何时，很多小伙伴拿到宝贵的一手数据，却不知道如何分析。以后这种尴尬场景，会大… | by Shuyi Wang | May, 2023 | Medium
曾几何时，很多小伙伴拿到宝贵的一手数据，却不知道如何分析。以后这种尴尬场景，会大幅减少 来源： 如何用 ChatGPT 帮你自动分析数据？. 曾几何时，很多小伙伴拿到宝贵的一手数据，却不知道如何分析。以后这种尴尬场景，会大… | by Shuyi Wang | May, 2023 | Medium     误判 好几天之前，我就在 ChatGPT 选单里看到了 Code Interpreter。它正在灰度测试中 — — 先给一部分用户试用，如果反响不错并做了一定改进，就能推广给更多用户。 可惜当时我没能正确理解它的含义，犯了一个大错误 — —...