Ex-Google X Trio ingin AI mereka menjadi otak kedua Anda-dan mereka hanya mengumpulkan $ 6 juta untuk mewujudkannya

Tiga mantan ilmuwan Google X bertujuan untuk memberi Anda otak kedua secara virtual-bukan dalam arti sci-fi atau chip-in-head-head-tetapi melalui aplikasi bertenaga AI yang mendapatkan konteks dengan mendengarkan semua yang Anda katakan di latar belakang. Startup mereka, TwinMindtelah mengumpulkan $ 5,7 juta dalam pendanaan benih dan merilis versi Android, bersama dengan model ucapan AI baru. Ini juga memiliki versi iPhone.

Didirikan bersama pada Maret 2024 oleh Daniel George (CEO) dan mantan rekannya Google X. Sunny Tang dan Mahi Karim (keduanya CTO), TwinMind berjalan di latar belakang, menangkap pidato sekitar (dengan izin pengguna) untuk membangun grafik pengetahuan pribadi.

Dengan mengubah pikiran, rapat, kuliah, dan percakapan yang diucapkan menjadi memori terstruktur, aplikasi ini dapat menghasilkan catatan yang bertenaga AI, to-dos, dan jawaban. Ini bekerja secara offline, memproses audio secara real-time untuk menyalin di perangkat, dan dapat menangkap audio terus menerus selama 16-17 jam tanpa menguras baterai perangkat, kata para pendiri. Aplikasi ini juga dapat mencadangkan data pengguna sehingga percakapan dapat dipulihkan jika perangkat hilang, meskipun pengguna dapat memilih keluar dari itu. Ini juga mendukung terjemahan real-time dalam lebih dari 100 bahasa.

TwinMind membedakan dirinya dari AI bertemu dengan catatan catatan seperti Otter, Granola, dan Fireflies dengan menangkap audio secara pasif di latar belakang sepanjang hari. Untuk memungkinkan hal ini, tim membangun layanan tingkat rendah di Swift murni yang berjalan secara asli di iPhone. Sebaliknya, banyak pesaing menggunakan React Native dan mengandalkan pemrosesan berbasis cloud, yang dibatasi Apple dari berjalan di latar belakang untuk waktu yang lama, George mengatakan dalam sebuah wawancara eksklusif.

“Kami menghabiskan sekitar enam hingga tujuh bulan tahun lalu hanya menyempurnakan penangkapan audio ini terus menerus dan sampai di sana untuk menemukan banyak peretasan di sekitar taman bertembok Apple,” katanya kepada TechCrunch.

George meninggalkan Google X pada tahun 2020 dan mendapat ide untuk TwinMind pada tahun 2023 ketika bekerja di JPMorgan sebagai wakil presiden dan menerapkan pimpinan AI, menghadiri pertemuan back-to-back setiap hari. Untuk menghemat waktu, ia membangun skrip yang menangkap audio, menyalinnya di iPad -nya, dan memasukkannya ke ChatGpt – yang mulai memahami proyeknya dan bahkan menghasilkan kode yang dapat digunakan. Terkesan dengan hasilnya, ia membaginya dengan teman -teman dan mempostingnya di Blind, di mana orang lain menunjukkan minat tetapi tidak menginginkan sesuatu yang berjalan di laptop kerja mereka. Itu membuatnya membangun aplikasi yang bisa berjalan di telepon pribadi, dengan tenang mendengarkan selama pertemuan untuk mengumpulkan konteks yang bermanfaat.

Selain aplikasi selulerTwinMind menawarkan a Ekstensi Chrome Itu mengumpulkan konteks tambahan melalui aktivitas browser. Menggunakan Visi AI, ini dapat memindai tab terbuka secara visual dan menafsirkan konten dari berbagai platform, termasuk email, slack, dan gagasan.

Startup bahkan menggunakan ekstensi itu sendiri untuk mendapatkan daftar magang dari lebih dari 850 aplikasi yang mereka terima musim panas ini.

“Kami membuka semua profil LinkedIn dan CV dari 854 pelamar di tab Browser, kemudian meminta ekstensi krom untuk memberi peringkat kandidat terbaik,” kata George. “Itu melakukan pekerjaan yang fantastis – itulah cara kami menyewa magang terakhir kami.”

Dia mencatat bahwa obrolan AI saat ini-termasuk chatgpt Openai dan Claude Antropik-tidak dapat dengan mudah memproses ratusan dokumen atau parse mendaftar dari alat-alat seperti LinkedIn atau Gmail untuk mengumpulkan informasi kontekstual. Demikian pula, browser bertenaga AI seperti yang dari kebingungan dan perusahaan browser tidak memiliki kemampuan untuk membangun pengetahuan dari percakapan offline dan pertemuan langsung Anda.

Startup saat ini memiliki lebih dari 30.000 pengguna, dengan sekitar 15.000 di antaranya aktif setiap bulan. Sebanyak 20-30% pengguna TwinMind juga menggunakan ekstensi Chrome, kata George.

Sementara AS adalah basis terbesar untuk TwinMind sejauh ini, startup juga melihat traksi dari India, Brasil, Filipina, Ethiopia, Kenya, dan Eropa.

TwinMind menargetkan audiens umum, meskipun 50-60% dari penggunanya saat ini adalah profesional, sekitar 25% adalah siswa, dan 20-25% sisanya adalah individu yang menggunakannya untuk tujuan pribadi.

George mengatakan kepada TechCrunch bahwa ayahnya termasuk di antara orang -orang yang menggunakan TwinMind untuk menulis otobiografi mereka.

Salah satu kelemahan signifikan AI adalah potensinya untuk mengkompromikan privasi pengguna. Tetapi George menegaskan bahwa TwinMind tidak melatih modelnya pada data pengguna dan dirancang untuk bekerja tanpa mengirim rekaman ke cloud. Tidak seperti banyak aplikasi pencatatan AI lainnya, TwinMind tidak membiarkan pengguna mengakses rekaman audio nanti-audio dihapus dengan cepat-sementara hanya teks yang ditranskripsi disimpan secara lokal di aplikasi, katanya.

Pengalaman Google X membantu mempercepat

Rekan pendiri TwinMind menghabiskan beberapa tahun bekerja di berbagai proyek di Google X. George mengatakan kepada TechCrunch bahwa ia mengerjakan enam proyek saja, termasuk Dan -tim di belakang earbud bertenaga AI, yang baru -baru ini menjadi berita utama untuk menggugat Openai dan Jony Ive. Pengalaman itu membantu tim TwinMind bergerak cepat dari konsep ke produk.

“Google X sebenarnya adalah tempat yang sempurna untuk mempersiapkan diri untuk memulai perusahaan Anda sendiri,” kata George. “Ada sekitar 30 hingga 40 proyek seperti startup yang terjadi pada waktu tertentu. Tidak ada orang lain yang bekerja di enam startup tahap awal selama dua atau tiga tahun sebelum meluncurkannya sendiri-setidaknya tidak dalam rentang singkat seperti itu.”

Sebelum bergabung dengan Google, George bekerja untuk menerapkan pembelajaran yang mendalam pada astrofisika gelombang gravitasi sebagai bagian dari kelompok Ligo pemenang Hadiah Nobel di Pusat Nasional Universitas Illinois untuk aplikasi superkomputer. Dia telah menyelesaikan gelar PhD di AI untuk astrofisika hanya dalam satu tahun – pada usia 24 – suatu prestasi yang membuatnya bergabung dengan laboratorium penelitian Stephen Wolfram pada 2017 sebagai pembelajaran yang mendalam dan peneliti AI.

Koneksi awal dengan Wolfram datang lingkaran penuh bertahun-tahun kemudian-ia akhirnya menulis cek pertama untuk TwinMind, menandai investasi pertamanya di startup. Babak benih baru -baru ini dipimpin oleh ramping usaha, dengan partisipasi dari Sequoia Capital dan investor lainnya, termasuk Wolfram. Nilai putaran TwinMind pada $ 60 juta pasca-uang.

Model TwinMind Ear-3

Selain ekstensi aplikasi dan browsernya, TwinMind juga telah memperkenalkan model TwinMind Ear-3, seorang penerus EAR-2 yang ada, yang mendukung lebih dari 140 bahasa di seluruh dunia dan memiliki tingkat kesalahan kata 5,26%, kata startup. Model baru ini juga dapat mengenali speaker yang berbeda dalam percakapan dan memiliki tingkat kesalahan diarization pembicara sebesar 3,8%.

Model AI baru adalah perpaduan yang disesuaikan dari beberapa model open-source, dilatih pada set data internet yang dianotasi manusia yang dikuratori-termasuk podcast, video, dan film.

“Kami menemukan bahwa semakin banyak bahasa yang Anda dukung, semakin baik modelnya memahami aksen dan dialek regional karena pelatihan pada berbagai pembicara yang lebih luas,” kata George.

Model biaya $ 0,23/ jam dan akan tersedia melalui API kepada pengembang dan perusahaan selama beberapa minggu ke depan.

Ear-3, tidak seperti EAR-2, tidak mendukung pengalaman offline yang lengkap, karena ukurannya lebih besar dan berjalan di awan. Namun, aplikasi secara otomatis beralih ke EAR-2 jika internet hilang dan kemudian pindah kembali ke Ear-3 ketika kembali, kata George.

Dengan diperkenalkannya EAR-3, TwinMind sekarang menawarkan berlangganan Pro seharga $ 15/bulan, dengan jendela konteks yang lebih besar hingga 2 juta token dan dukungan email dalam waktu 24 jam. Meskipun demikian, versi gratis masih ada dengan semua fitur yang ada termasuk jam transkripsi yang tidak terbatas dan pengenalan suara di perangkat.

Startup saat ini memiliki tim yang terdiri dari 11 anggota. Ia berencana untuk merekrut beberapa desainer untuk meningkatkan pengalaman penggunanya dan membuat tim pengembangan bisnis untuk menjual API -nya. Selain itu, ada rencana untuk menghabiskan sejumlah uang untuk memperoleh pengguna baru.