新一轮 AI 军备竞赛:上下文、代币与成本

👁 1.2k views
新一轮 AI 军备竞赛:上下文、代币与成本

Sebagai seorang yang sentiasa berhubung dengan pemilik perniagaan, saya sering ditanya soalan ini: “Adakah pelaburan dalam AI masih berbaloi apabila kos dan had penggunaan sentiasa berubah?” Baru-baru ini, kami di AINNA perhatikan satu tanda yang memberi jawapan positif - pembekal LLM mula menaikkan had maksimum token bagi setiap sesi.

Pasukan teknikal kami baru-baru ini menghabiskan beberapa jam memperkukuh enjin parsing untuk 独立系统. Dahulu, tugas kompleks seperti ini akan menghabiskan baki sesi dalam beberapa minit sahaja. Kini, walaupun selepas berjam-jam beroperasi, masih banyak ruang token yang tinggal.

变化 ini lebih besar daripada sekadar speks teknikal. Ia menandakan pembekal LLM tidak lagi bersaing semata-mata melalui kecerdasan model. Mereka kini bersaing melalui tetingkap konteks yang lebih panjang, had penggunaan yang lebih tinggi, kos yang lebih rendah, tindak balas yang lebih pantas, dan akses yang lebih baik untuk pengguna.

Bagi saya, ini mengingatkan saya akan perang harga di kalangan penjual dalam talian.

Ada penjual yang terus memotong harga walaupun margin sudah nipis. Tujuannya bukan semestinya untung segera. Kadangkala, strateginya adalah untuk menarik lebih ramai pelanggan, merampas bahagian pasaran, dan melemahkan pesaing yang tidak mampu mengekalkan pangkalan pelanggan yang kukuh.

Pembekal LLP mungkin kini berada dalam fasa yang sama. Mereka menawarkan lebih banyak token, sesi lebih lama, dan nilai lebih baik - semuanya untuk mengunci pengguna ke dalam platform mereka sebelum pesaing sempat membina kesetiaan pelanggan yang lebih kuat.

Bagi perniagaan, ini adalah berita baik dalam jangka pendek. Anda boleh membina lebih banyak, menguji lebih banyak, dan menyiapkan projek yang lebih besar pada kos yang lebih rendah. Tugas yang dahulu memerlukan beberapa sesi, arahan berulang, dan pembinaan semula konteks berulang kali, kini boleh diselesaikan dalam satu aliran kerja yang lebih panjang.

Tetapi perang harga jarang bertahan selamanya. Apabila pesaing yang lemah pupus dan pengguna bergantung kepada segelintir pembekal sahaja, harga, had, dan syarat akses mungkin berubah semula.

Bagi perniagaan, pengajarannya mudah: manfaatkan persaingan ini, tetapi jangan bergantung sepenuhnya kepada satu pembekal sahaja. Gunakan 智能路由, 分离式系统, pemprosesan tempatan, dan beberapa pembekal LLM di mana mungkin.

Pemenang sebenar bukanlah syarikat yang menggunakan LLM paling berkuasa. Pemenangnya adalah syarikat yang boleh menukar pembekal, mengawal data sendiri, dan terus beroperasi apabila pasaran berubah.

#ArtificialIntelligence #LLM #AICompetition #DetachedSystem #SmartRouting #蒸馏 #自动化 #BusinessStrategy #NeuralOps #AINNA

Artificial Intelligence

Article image
BioResearch Microbiology & cancer disease research intelligence 6 inputs → traceable research priorities Explore →
Edge AI IoT & embedded Linux intelligence at the edge 14 edge agents → offline-capable Explore →
SmartCity AI-powered smart city infrastructure & operations 24 domains → one intelligent operating layer Explore →
Robotics Governed robotics at the industrial edge Perception → safety gateway → controller Explore →
AINNA
CLICK ME
Rotating Earth

Site Sections

No section data available yet.

Sites with documented sections will appear here.