llama.cpp · iPhone

Pakai llama.cpp dari iPhone, langsung ke komputermu

Hubungkan iPhone ke llama.cpp yang berjalan di komputermu. Atur alamat listener, firewall, jaringan privat, dan Oriveo tanpa membuka mesinnya ke internet publik.

Diperbarui
  • Pakai daya komputasi yang sudah kamu punya dari perangkat lain; lewat HTTP lokal, tidak ada kredensial API yang dikirim.
  • Oriveo adalah aplikasi klien: llama.cpp harus berjalan di komputermu. Modelnya tidak dijalankan di ponsel.
  • Jangan pernah membuka mesin tanpa autentikasi ke internet. Pakai Wi-Fi lokal atau VPN privat yang didukung seperti Tailscale; alamat publik atau nama domain yang mengarah ke campuran alamat publik dan privat akan ditolak.
Oriveo di iPhone: halaman penyedia, berisi penyedia yang kamu hubungkan dan pengeluaran bulan ini.

Siapkan llama.cpp

Jalankan mesinnya di antarmuka jaringan privat, cek port dari komputer itu sendiri, lalu buka akses hanya untuk LAN atau VPN privat.

  • llama-server --host 0.0.0.0 --port 8080 --model /path/model.gguf
  • --chat-template /path/template.jinja
  • GET http://127.0.0.1:8080/health

Hubungkan dari iPhone

Di menu Penyedia, pilih Komputasi lokal, pilih mesinnya, masukkan alamat privatnya, lalu cek daftar model yang terdeteksi sebelum menyimpan.

Jaga endpoint tetap privat

Jangan pernah membuka mesin tanpa autentikasi ke internet. Pakai Wi-Fi lokal atau VPN privat yang didukung seperti Tailscale; alamat publik atau nama domain yang mengarah ke campuran alamat publik dan privat akan ditolak.

Pertanyaan umum seputar aplikasi

Apakah perlu server proxy dari Oriveo?
Tidak. Aplikasi native terhubung langsung; versi web memakai fitur Local Network Access dan CORS di browser, dan server Oriveo tidak meneruskan alamat privatmu.
Apakah modelnya berjalan di ponsel?
Tidak. Model berjalan di komputer atau server; ponsel hanya berperan sebagai aplikasi klien.
Perintah dan port apa saja yang dipakai?
llama-server --host 0.0.0.0 --port 8080 --model /path/model.gguf · --chat-template /path/template.jinja · GET http://127.0.0.1:8080/health

Bacaan terkait

Dari blog

Hubungkan komputermu sendiri

Unduh aplikasi Oriveo untuk iOS atau Android, atau buka Oriveo di browser, lalu hubungkan mesin di jaringan privatmu.

Belum punya API key? Mulai dengan Oriveo Free.