Shuu12121 / CodeHawks-ModernBERT-1.0

huggingface.co
Total runs: 49
24-hour runs: 0
7-day runs: 0
30-day runs: 0
Model's Last Updated: March 03 2025
sentence-similarity

Introduction of CodeHawks-ModernBERT-1.0

Model Details of CodeHawks-ModernBERT-1.0

CodeHawks‑ModernBERT-1.0

概要

CodeHawks‑ModernBERT-1.0 は、コード検索およびコード理解のタスク向けに1からトレーニングしたCodeMorph-ModernBERT-BPE-1.3に追加学習を行った事前学習済みモデルです. 前モデルであるCodeHawks-ModernBERTよりもすべての言語において性能を改善し,全体的に強力なベースラインであるSalesforce/codet5p-220m-bimodalモデルの性能と同等かそれ以上の成果を残しました. 評価については こちらのノートブック をご確認ください. 以下はその結果の一部(プールサイズ100,ランダムな1000件のコードサーチ)です. リンク先のノートブックでは5つのシード値で実行していますが,おおむね結果は類似しており,モデルの出力が安定していることもご確認いただけます.

実験結果(シード値42)
言語 指標 Salesforce/codet5p-220m-bimodal CodeHawks‑ModernBERT CodeHawks‑ModernBERT‑1.0
Python MRR 0.8227 0.8691 0.8850
MAP 0.8227 0.8691 0.8850
R‑Precision 0.7590 0.8180 0.8480
Java MRR 0.8911 0.8121 0.8428
MAP 0.8911 0.8121 0.8428
R‑Precision 0.8380 0.7510 0.7890
JavaScript MRR 0.7759 0.7719 0.8081
MAP 0.7759 0.7719 0.8081
R‑Precision 0.6830 0.7040 0.7490
PHP MRR 0.8996 0.8409 0.8778
MAP 0.8996 0.8409 0.8778
R‑Precision 0.8490 0.7860 0.8340
Ruby MRR 0.7633 0.7610 0.7808
MAP 0.7633 0.7610 0.7808
R‑Precision 0.6740 0.6720 0.7040
Go MRR 0.8310 0.9198 0.9254
MAP 0.8310 0.9198 0.9254
R‑Precision 0.7590 0.8840 0.8870

補足
  • Salesforce/codet5p-220m-bimodal ・全体として JavaやPHP で高い評価が得られていますが、 PythonやJavaScript では他の言語に比べてやや低めの値となっています。CodeHawksモデルと比較すると、多くの言語で性能は下回る傾向にあります。
  • CodeHawks‑ModernBERT ・シード42時点では、特に Python、PHP、Go で高い性能を示す一方で、 Java では他のモデルと比較して 少し低い 結果となっています。 JavaScriptとRuby もやや低めの結果です。
  • CodeHawks‑ModernBERT‑1.0 ・全体的に各言語での指標が向上しており、前モデルであるCodeHawks-ModernBERTよりも一段と高い評価が得られています。特に、 強力なベースラインモデルであるSalesforce/codet5p-220m-bimodalと比較しても、多くの言語で同等かそれ以上の性能 を示しています。

Runs of Shuu12121 CodeHawks-ModernBERT-1.0 on huggingface.co

49
Total runs
0
24-hour runs
0
3-day runs
0
7-day runs
0
30-day runs

More Information About CodeHawks-ModernBERT-1.0 huggingface.co Model

More CodeHawks-ModernBERT-1.0 license Visit here:

https://choosealicense.com/licenses/apache-2.0

CodeHawks-ModernBERT-1.0 huggingface.co

CodeHawks-ModernBERT-1.0 huggingface.co is an AI model on huggingface.co that provides CodeHawks-ModernBERT-1.0's model effect (), which can be used instantly with this Shuu12121 CodeHawks-ModernBERT-1.0 model. huggingface.co supports a free trial of the CodeHawks-ModernBERT-1.0 model, and also provides paid use of the CodeHawks-ModernBERT-1.0. Support call CodeHawks-ModernBERT-1.0 model through api, including Node.js, Python, http.

CodeHawks-ModernBERT-1.0 huggingface.co Url

https://huggingface.co/Shuu12121/CodeHawks-ModernBERT-1.0

Shuu12121 CodeHawks-ModernBERT-1.0 online free

CodeHawks-ModernBERT-1.0 huggingface.co is an online trial and call api platform, which integrates CodeHawks-ModernBERT-1.0's modeling effects, including api services, and provides a free online trial of CodeHawks-ModernBERT-1.0, you can try CodeHawks-ModernBERT-1.0 online for free by clicking the link below.

Shuu12121 CodeHawks-ModernBERT-1.0 online free url in huggingface.co:

https://huggingface.co/Shuu12121/CodeHawks-ModernBERT-1.0

CodeHawks-ModernBERT-1.0 install

CodeHawks-ModernBERT-1.0 is an open source model from GitHub that offers a free installation service, and any user can find CodeHawks-ModernBERT-1.0 on GitHub to install. At the same time, huggingface.co provides the effect of CodeHawks-ModernBERT-1.0 install, users can directly use CodeHawks-ModernBERT-1.0 installed effect in huggingface.co for debugging and trial. It also supports api for free installation.

CodeHawks-ModernBERT-1.0 install url in huggingface.co:

https://huggingface.co/Shuu12121/CodeHawks-ModernBERT-1.0

Url of CodeHawks-ModernBERT-1.0

CodeHawks-ModernBERT-1.0 huggingface.co Url

Provider of CodeHawks-ModernBERT-1.0 huggingface.co

Shuu12121
ORGANIZATIONS

Other API from Shuu12121