clay-atlas.com Open in urlscan Pro
2606:4700:3031::6815:438e  Public Scan

Form analysis
1 forms found in the DOM

GET https://clay-atlas.com/

<form role="search" method="get" class="search-form" action="https://clay-atlas.com/">
  <label>
    <span class="screen-reader-text">Search for...</span>
  </label>
  <input type="search" class="search-field" aria-label="Search" placeholder="Search for..." value="" name="s">
  <button type="submit" class="search-submit nv-submit" aria-label="Search">
    <span class="nv-search-icon-wrap">
      <span class="nv-icon nv-search">
        <svg width="15" height="15" viewBox="0 0 1792 1792" xmlns="http://www.w3.org/2000/svg">
          <path
            d="M1216 832q0-185-131.5-316.5t-316.5-131.5-316.5 131.5-131.5 316.5 131.5 316.5 316.5 131.5 316.5-131.5 131.5-316.5zm512 832q0 52-38 90t-90 38q-54 0-90-38l-343-342q-179 124-399 124-143 0-273.5-55.5t-225-150-150-225-55.5-273.5 55.5-273.5 150-225 225-150 273.5-55.5 273.5 55.5 225 150 150 225 55.5 273.5q0 220-124 399l343 343q37 37 37 90z">
          </path>
        </svg>
      </span> </span>
  </button>
</form>

Text Content

Skip to content


CLAY-TECHNOLOGY WORLD

Hope every day is better than yesterday
 * About Me
 * 中文 (台灣)
   
   * 中文 (台灣)
   * English

Search for...




CLAY-TECHNOLOGY WORLD

Hope every day is better than yesterday
Navigation Menu
Navigation Menu
 * About Me
 * 中文 (台灣)
   * 中文 (台灣)
   * English




[置頂] CODING-INTERVIEW-UNIVERSITY 學習筆記目錄

 *  Clay
 * 2021-04-252022-03-27
 * 4 Comments
 * 未分類

coding-interview-university 是一個 GitHub 上的開源專案，裡頭收錄了亞馬遜 AWS 工程師 John Washam
先生為了面試 Google 而準備的學習筆記。截止至 2021 年 04 月，該專案已經有了 165,000 個 star。

在專案的說明中，他建議 fork 此專案，並自己使用 markdown
語法控管自己的學習進度；不過除此之外，他也同樣提到了：人不可能完全記得自己學習過的知識。他自己本身也在學習了幾個月後花費了大量時間將自己的筆記做成卡片反覆複習。

Read More »[置頂] coding-interview-university 學習筆記目錄


LEETCODE: 119-PASCAL’S TRIANGLE II 解題紀錄

 *  Clay
 * 2023-10-162023-10-16
 * LeetCode

… Read More »LeetCode: 119-Pascal’s Triangle II 解題紀錄




使用 CUPY 來利用 GPU 提昇矩陣運算速度

 *  Clay
 * 2023-10-042023-10-04
 * Python


前言

CuPy 是一個開源的 GPU 加速數值計算函式庫，專為深度學習以及科學計算而設計。它和 Python 中著名的 NumPy
套件有許多相同的使用方法與函式，但更進一步能夠在 GPU 上執行運算。簡單來說，例如矩陣運算等能夠利用 GPU 平行化計算的用途，CuPy
能夠實現一定程度的加速。

Read More »使用 CuPy 來利用 GPU 提昇矩陣運算速度



使用 HUGGINGFACE TRANSFORMER 中的 TEXTSTREAMER 和 TEXTITERATORSTREAMER
來實現串流式（STREAM）輸出生成 TOKEN

 *  Clay
 * 2023-09-212023-09-21
 * Machine Learning


前言

現在的生成式模型越來越厲害的，各個獨立研究人員也都部署起了一個又一個的開源大型語言模型（LLMs）。但是在使用大型語言模型做推理、生成回覆時，要是真要去等待一個比較長的輸出，那是真的挺花時間的。

Read More »使用 HuggingFace Transformer 中的 TextStreamer 和 TextIteratorStreamer
來實現串流式（stream）輸出生成 token



[論文閱讀] QLORA: EFFICIENT FINETUNING OF QUANTIZED LLMS

 *  Clay
 * 2023-09-192023-09-21
 * Papers


前言

大模型的浪潮自從 2022 年 11 月 ChatGPT 的發布後便一發不可收拾，直到現在開源的大型語言模型（Large Language
Model）的量級還在不斷增大，比方說 LLaMA-2-70B、以及 Falcon-180B 等等。

大型語言模型的性能自然是相當優秀的，可是往往需要耗費大量且價格昂貴的 GPU 記憶體，這使得一些邊緣運算裝置根本就不可能讓模型進行推理（inference）
—— 更遑論訓練、微調自己的模型了。

Read More »[論文閱讀] QLoRA: Efficient Finetuning of Quantized LLMs



支援 PYTHON 語法、又有 C 速度的新程式語言 MOJO 環境配置筆記

 *  Clay
 * 2023-09-132023-09-13
 * Mojo


介紹

Mojo 是一名比較新的語言，是由 LLVM 之父和 Swift 之父 Chris Lattner 所開發。

之所以開發 Mojo，據稱是為了填補『研究』與『生產』的鴻溝，所以 Mojo 擁有 Python 般簡易的語法以及 C 的執行速度。當然，最主要的可能還是對於
AI 的優化 —— 現在 AI 的市場已經值得一門全新的程式語言了。

Read More »支援 Python 語法、又有 C 速度的新程式語言 Mojo 環境配置筆記



[PYTORCH] 遍歷模型每一層神經網路筆記

 *  Clay
 * 2023-09-122023-09-12
 * Machine Learning, PyTorch


介紹

最近在因緣際會下，有了簡單改一些模型架構的機會，於是便趁這個機會好好地摸索了下 PyTorch 中模型神經網路層的遍歷打印方式。

Read More »[PyTorch] 遍歷模型每一層神經網路筆記



LEETCODE: 1282-GROUP THE PEOPLE GIVEN THE GROUP SIZE THEY BELONG TO 解題紀錄

 *  Clay
 * 2023-09-112023-09-11
 * LeetCode

There are n people that are split into some unknown number of groups. Each
person is labeled with a unique ID from 0 to n - 1.

Read More »LeetCode: 1282-Group the People Given the Group Size They Belong To
解題紀錄



[論文閱讀] THE FORWARD-FORWARD ALGORITHM: SOME PRELIMINARY INVESTIGATION

 *  Clay
 * 2023-09-042023-09-04
 * Machine Learning


介紹

論文連結： https://arxiv.org/abs/2212.13345

本篇研究工作的作者是鼎鼎大名的深度學習之父 Geoffrey Hinton，最初撰寫本篇論文時仍是 Google Brain 的研究員（於 2023 年離開）。

Read More »[論文閱讀] The Forward-Forward Algorithm: Some Preliminary Investigation


LEETCODE: 168-EXCEL SHEET COLUMN TITLE 解題紀錄

 *  Clay
 * 2023-08-222023-08-22
 * C++, LeetCode, Python


題目

Given an integer columnNumber, return its corresponding column title as it
appears in an Excel sheet.

Read More »LeetCode: 168-Excel Sheet Column Title 解題紀錄


LEETCODE: 33-SEARCH IN ROTATED SORTED ARRAY 解題紀錄

 *  Clay
 * 2023-08-082023-08-08
 * C++, LeetCode, Python


題目

There is an integer array nums sorted in ascending order (with distinct values).

Read More »LeetCode: 33-Search in Rotated Sorted Array 解題紀錄
 * 1
 * 2
 * 3
 * ...
 * 95
 * 下一頁 »



聯絡我

電子信箱: ccs96307@gmail.com

Neve | Powered by WordPress