→ אלע ארטיקלען

וועב אַי טאָאָלקיט: זעקס נעוראַל נעטוואָרקס רעכט אין דיין בלעטערער - פריי

ליכט 3 ד זאַץ: אַ בלעטערער פֿענצטער מיט זעקס גלאָוינג נעוראַל נעץ טיילז אויף אַ ווייַס הינטערגרונט

יוזשאַוואַלי "לויפן אַ נעוראַל נעץ" מיטל סיינינג אַרויף פֿאַר אַ שליסל, איבערגעבן אַ קאָרט און ווארטן בשעת דיין טעקעס אַרומפאָרן צו עמעצער אַנדערש ס סערווער. די AI Toolkit בלאַט אַרבעט די אנדערע וועג אַרום: זעקס גרייט אַי פאַנגקשאַנז זענען קאַמפּיוטאַד רעכט אין דיין בלעטערער, ​​קיין איין בייט פון דיין דאָקומענטן, פאָטאָס אָדער רעקאָרדינגס לאָזן די מיטל, און גאָרנישט איז באפוילן. עס איז די אָפֿן וועב-אַי-טאָלקיט ביבליאָטעק אונטער די MIT דערלויבעניש - מיר באַלעבאָס עס ווי אַ בלאַט פון לעבן ביישפילן ווו איר קענען פּרובירן יעדער פונקציע אויף דיין אייגענע בילד אָדער טעקסט, און נעמען די פאַרטיק קאָד אין דיין פּרויעקט.

וועב אַי טאָאָלקיט: זעקס מאָדעס (OCR, רייד צו טעקסט, סאַמעריזיישאַן, TTS, קלאַסאַפאַקיישאַן, זוכן) און גרייט סאַמפּאַלז

ווי עס אַרבעט

דער מאָטאָר איז געבויט אויף די מאָדערן וועב קאַמפּיוטינג אָנלייגן: ייַזנוואַרג אַקסעלעריישאַן דורך WebGPU און WebNN, פּאַראַלעל קאַמפּיוטינג דורך WebAssembly SIMD און געבוירן בלעטערער אַי אַפּיס. אויב וועבגפּו איז אַנאַוויילאַבאַל אויף דיין מיטל, די ביבליאָטעק אויטאָמאַטיש פאַלן צוריק צו אָפּטימיזעד וואַסם אויף אַ פּראָסט קפּו - אַזוי עס לויפט אויף קיין קאָמפּיוטער, עס איז נאָר פאַסטער אויף גיימינג ייַזנוואַרג. מאָדעל ווייץ זענען דאַונלאָודיד צו דעם בלעטערער אַמאָל און קאַשט: נאָך דער ערשטער מאַסע די פאַנגקשאַנז האַלטן ארבעטן אפילו אָפפלינע.

זעקס פאַנגקשאַנז אין איין פֿענצטער

  • OCR: דערקענונג פון געדרוקט און כאַנדריטאַן טעקסט פון אַ בילד אָדער סקרעענשאָט - אַ פאָטאָ פון אַ קאָנטראַקט, אַ פּרעזענטירונג רוק, הערות פון אַ ווהיטעבאָאַרד.
  • רייד צו טעקסט: טראַנסקריפּציע פון ​​אַ אַודיאָ רעקאָרדינג מיט טימעסטאַמפּס, אָן ופּלאָאַדינג די טעקע ערגעץ.
  • סאַמעריזיישאַן: אַ קאַנדענסט ווערסיע פון ​​אַ לאַנג אַרטיקל, באַריכט אָדער קאָנטראַקט.
  • טעקסט צו רייד: רעדע סינטעז פון דיין טעקסט ניצן דעם בלעטערער זיך.
  • בילד קלאַסאַפאַקיישאַן: דיטעקטינג אַבדזשעקץ און קאַטעגאָריעס אין אַ בילד מיט בטחון סקאָרז.
  • RAG & זוכן: פּאַפּ דיין דאָקומענטן און פרעגן אַ קשיא - די געצייַג געפינט און ווייזט די באַטייַטיק פּאַסידזשיז.

יעדער פֿונקציע איז טעסטעד רעכט אויף דעם בלאַט: שלעפּן אַ טעקע אָדער קלייַבן אַ גרייט מוסטער און שלאָגן "לויפן אַי פּראַסעסינג" - דער רעזולטאַט קענען זיין קאַפּיד אָדער דאַונלאָודיד ווי טעקסט.

קאָד פֿאַר דיין אייגענע פּרויעקט

די ביבליאָטעק ינסטאָלז מיט אַ איין באַפֿעל - npm install web-ai-toolkit - און איז ימפּאָרטיד פֿונקציע דורך פֿונקציע: ocr, summarize, transcribeAudioFile, textToSpeech, classifyImage, doRAGSearch. דער בלאַט האט אַ "קאָוד בייַשפּיל" קוויטל מיט גרייט סניפּאַץ, אַזוי איר טאָן ניט האָבן צו שרייַבן די ינאַגריישאַן פון קראַצן.

ווו די כאַפּן איז

ערשטער: בלעטערער און זכּרון. וועבגפּו אַרבעט אין פול אין קראָום און עדזש (און אַ גראָוינג רשימה פון אנדערע), און דער ערשטער מאָדעל אראפקאפיע נעמט צייט און קאַש פּלאַץ. צווייטנס: דאָס זענען סאָליד היגע מאָדעלס, נישט ריז וואָלקן טעקסט גענעראַטאָרס - קוואַליטעט איז רעכט ווו עס איז דארף, און ווען איר דאַרפֿן ערנסט שפּראַך אַנאַליסיס, די פּלאַץ אָפפערס פול-וואָג מאָדעלס אויף וואָג. דריט: טעקסט-צו-רעדן רילייז אויף די געבויט-אין סינטעז פון דעם בלעטערער, ​​אַזוי די קול דעפּענדס אויף דיין סיסטעם אלא ווי אויף אַ נעץ מאָדעל.

פארוואס עס איז וויכטיק אין פאַקטיש לעבן

ארויסציען טעקסט פון אַ יבערקוקן איידער איר שיקן עס צו אַן אַדוואָקאַט, ברעכן אַ שעה-לאַנג רופן אין קויל ווייזט אָן שיקן די רעקאָרדינג ערגעץ, דראַפטינג אַ ווויסאָוווער, קלאַסאַפייינג אַ הונדערט בילדער אָדער געפֿינען די רעכט פּונקט אין אַ הויפן פון דיין אייגענע דאָקומענטן - דאָס זענען טיפּיש טאַסקס וואָס געוויינט צו דאַרפן אַ וואָלקן דינסט און באַצאָלט טאָקענס. דאָ דער זעלביקער סצענאַר קלאָוזיז אָן רעגיסטראַציע, אָן אַ קאָרט און אָן שיקן דיין דאַטן צו ווער עס יז.

פּרוּווט עס: די וועב אַי טאָאָלקיט (פריי) אויף דעם פּלאַץ - און ווייַטער צו אים, די רשימה פון די אנדערע פריי מכשירים, פֿון די וועב בלאַט סאַמערייזער צו וועבקאַם באַוועגונג כאַפּן.