68d19fb2569d603fcb8f6b4fe668ae56aa217f71
[akaros.git] / kern / src / kfs.c
1 /* Copyright (c) 2009, 2010 The Regents of the University of California
2  * Barret Rhoden <brho@cs.berkeley.edu>
3  * See LICENSE for details.
4  *
5  * Implementation of the KFS file system.  It is a RAM based, read-only FS
6  * consisting of files that are added to the kernel binary image.  Might turn
7  * this into a read/write FS with directories someday. */
8
9 #ifdef __SHARC__
10 #pragma nosharc
11 #endif
12
13 #ifdef __DEPUTY__
14 #pragma nodeputy
15 #endif
16
17 #include <vfs.h>
18 #include <kfs.h>
19 #include <slab.h>
20 #include <kmalloc.h>
21 #include <string.h>
22 #include <stdio.h>
23 #include <assert.h>
24 #include <error.h>
25 #include <cpio.h>
26 #include <pmap.h>
27
28 #define KFS_MAX_FILE_SIZE 1024*1024*128
29 #define KFS_MAGIC 0xdead0001
30
31 /* VFS required Functions */
32 /* These structs are declared again and initialized farther down */
33 struct page_map_operations kfs_pm_op;
34 struct super_operations kfs_s_op;
35 struct inode_operations kfs_i_op;
36 struct dentry_operations kfs_d_op;
37 struct file_operations kfs_f_op;
38
39 /* TODO: something more better.  Prob something like the vmem cache, for this,
40  * pids, etc.  Good enough for now.  This also means we can only have one
41  * KFS instance, and we also aren't synchronizing access. */
42 static unsigned long kfs_get_free_ino(void)
43 {
44         static unsigned long last_ino = 1;       /* 1 is reserved for the root */
45         last_ino++;
46         if (!last_ino)
47                 panic("Out of inos in KFS!");
48         return last_ino;
49 }
50
51 /* Slabs for KFS specific info chunks */
52 struct kmem_cache *kfs_i_kcache;
53
54 static void kfs_init(void)
55 {
56         kfs_i_kcache = kmem_cache_create("kfs_ino_info", sizeof(struct kfs_i_info),
57                                          __alignof__(struct kfs_i_info), 0, 0, 0);
58 }
59
60 /* Creates the SB (normally would read in from disc and create).  Ups the refcnt
61  * for whoever consumes this.  Returns 0 on failure.
62  * TODO: consider pulling out more of the FS-independent stuff, if possible.
63  * There are only two things, but the pain in the ass is that you'd need to read
64  * the disc to get that first inode, and it's a FS-specific thing. */
65 struct super_block *kfs_get_sb(struct fs_type *fs, int flags,
66                                char *dev_name, struct vfsmount *vmnt)
67 {
68         /* Ought to check that dev_name has our FS on it.  in this case, it's
69          * irrelevant. */
70         //if (something_bad)
71         //      return 0;
72         static bool ran_once = FALSE;
73         if (!ran_once) {
74                 ran_once = TRUE;
75                 kfs_init();
76         }
77
78         /* Build and init the SB.  No need to read off disc. */
79         struct super_block *sb = get_sb();
80         sb->s_dev = 0;
81         sb->s_blocksize = 1;
82         sb->s_maxbytes = KFS_MAX_FILE_SIZE;
83         sb->s_type = &kfs_fs_type;
84         sb->s_op = &kfs_s_op;
85         sb->s_flags = flags;
86         sb->s_magic = KFS_MAGIC;
87         sb->s_mount = vmnt;
88         sb->s_syncing = FALSE;
89         sb->s_bdev = 0;
90         strlcpy(sb->s_name, "KFS", 32);
91         /* store the location of the CPIO archive.  make this more generic later. */
92         extern uint8_t _binary_obj_kern_initramfs_cpio_size[];
93         extern uint8_t _binary_obj_kern_initramfs_cpio_start[];
94         sb->s_fs_info = (void*)_binary_obj_kern_initramfs_cpio_start;
95
96         /* Final stages of initializing the sb, mostly FS-independent */
97         /* 1 is the KFS root ino (inode number) */
98         init_sb(sb, vmnt, &kfs_d_op, 1, 0);
99         /* Parses the CPIO entries and builds the in-memory KFS tree. */
100         parse_cpio_entries(sb, sb->s_fs_info);
101         printk("KFS superblock loaded\n");
102         return sb;
103 }
104
105 void kfs_kill_sb(struct super_block *sb)
106 {
107         panic("Killing KFS is not supported!");
108 }
109
110 /* Every FS must have a static FS Type, with which the VFS code can bootstrap */
111 struct fs_type kfs_fs_type = {"KFS", 0, kfs_get_sb, kfs_kill_sb, {0, 0},
112                TAILQ_HEAD_INITIALIZER(kfs_fs_type.fs_supers)};
113
114 /* Page Map Operations */
115
116 /* Fills page with its contents from its backing store file.  Note that we do
117  * the zero padding here, instead of higher in the VFS.  Might change in the
118  * future. */
119 int kfs_readpage(struct file *file, struct page *page)
120 {
121         struct kfs_i_info *k_i_info = (struct kfs_i_info*)file->f_inode->i_fs_info;
122         uintptr_t begin = (size_t)k_i_info->filestart + page->pg_index * PGSIZE;
123         /* Need to be careful we don't copy beyond the EOF, and that we zero out
124          * whatever is left over.  The memset is a noop when copy_amt == PGSIZE. */
125         size_t copy_amt = MIN(PGSIZE, file->f_inode->i_size - begin);
126         memcpy(page2kva(page), (void*)begin, copy_amt);
127         memset(page2kva(page) + copy_amt, 0, PGSIZE - copy_amt);
128         /* This is supposed to be done in the IO system when the operation is
129          * complete.  Since we aren't doing a real IO request, and it is already
130          * done, we can do it here. */
131         page->pg_flags |= PG_UPTODATE;
132         unlock_page(page);
133         return 0;
134 }
135
136 /* Super Operations */
137
138 /* creates and initializes a new inode.  generic fields are filled in.  specific
139  * fields are filled in in read_inode() based on what's on the disk for a given
140  * i_no.  i_no is set by the caller. */
141 struct inode *kfs_alloc_inode(struct super_block *sb)
142 {
143         /* arguably, we can avoid some of this init by using the slab/cache */
144         struct inode *inode = kmem_cache_alloc(inode_kcache, 0);
145         memset(inode, 0, sizeof(struct inode));
146         TAILQ_INSERT_HEAD(&sb->s_inodes, inode, i_sb_list);
147         TAILQ_INIT(&inode->i_dentry);
148         inode->i_ino = 0;                                       /* set by caller later */
149         atomic_set(&inode->i_refcnt, 1);
150         inode->i_blksize = 1;                           /* keep in sync with get_sb() */
151         spinlock_init(&inode->i_lock);
152         inode->i_op = &kfs_i_op;
153         inode->i_fop = &kfs_f_op;
154         inode->i_sb = sb;
155         inode->i_state = 0;                                     /* need real states, want I_NEW */
156         inode->dirtied_when = 0;
157         atomic_set(&inode->i_writecount, 0);
158         inode->i_fs_info = kmem_cache_alloc(kfs_i_kcache, 0);
159         TAILQ_INIT(&((struct kfs_i_info*)inode->i_fs_info)->children);
160         ((struct kfs_i_info*)inode->i_fs_info)->filestart = 0;
161         /* Set up the page_map structures.  Default is to use the embedded one. */
162         inode->i_mapping = &inode->i_pm;
163         inode->i_mapping->pm_host = inode;
164         radix_tree_init(&inode->i_mapping->pm_tree);
165         spinlock_init(&inode->i_mapping->pm_tree_lock);
166         inode->i_mapping->pm_op = &kfs_pm_op;
167         inode->i_mapping->pm_flags = 0;
168         return inode;
169         /* caller sets i_ino, i_list set when applicable */
170 }
171
172 /* deallocs and cleans up after an inode. */
173 void kfs_destroy_inode(struct inode *inode)
174 {
175         kmem_cache_free(kfs_i_kcache, inode->i_fs_info);
176         kmem_cache_free(inode_kcache, inode);
177 }
178
179 /* reads the inode data on disk specified by inode->i_ino into the inode.
180  * basically, it's a "make this inode the one for i_ino (i number)" */
181 void kfs_read_inode(struct inode *inode)
182 {
183         /* need to do something to link this inode/file to the actual "blocks" on
184          * "disk". */
185
186         /* TODO: what does it mean to ask for an inode->i_ino that doesn't exist?
187          *      possibly a bug, since these inos come from directories */
188         if (inode->i_ino == 1) {
189                 inode->i_mode = 0x777;                  /* TODO: use something appropriate */
190                 inode->i_nlink = 1;                             /* assuming only one hardlink */
191                 inode->i_uid = 0;
192                 inode->i_gid = 0;
193                 inode->i_rdev = 0;
194                 inode->i_size = 0;                              /* make sense for KFS? */
195                 inode->i_atime.tv_sec = 0;
196                 inode->i_atime.tv_nsec = 0;
197                 inode->i_mtime.tv_sec = 0;
198                 inode->i_mtime.tv_nsec = 0;
199                 inode->i_ctime.tv_sec = 0;
200                 inode->i_ctime.tv_nsec = 0;
201                 inode->i_blocks = 0;
202                 inode->i_bdev = 0;                              /* assuming blockdev? */
203                 inode->i_flags = FS_I_DIR;
204                 inode->i_socket = FALSE;
205         } else {
206                 panic("Not implemented");
207         }
208         /* TODO: unused: inode->i_hash add to hash (saves on disc reading) */
209 }
210
211 /* called when an inode in memory is modified (journalling FS's care) */
212 void kfs_dirty_inode(struct inode *inode)
213 {       // KFS doesn't care
214 }
215
216 /* write the inode to disk (specifically, to inode inode->i_ino), synchronously
217  * if we're asked to wait */
218 void kfs_write_inode(struct inode *inode, bool wait)
219 {       // KFS doesn't care
220 }
221
222 /* called when an inode is decref'd, to do any FS specific work */
223 void kfs_put_inode(struct inode *inode)
224 {       // KFS doesn't care
225 }
226
227 /* called when an inode is about to be destroyed.  the generic version ought to
228  * remove every reference to the inode from the VFS, and if the inode isn't in
229  * any directory, calls delete_inode */
230 void kfs_drop_inode(struct inode *inode)
231 { // TODO: should call a generic one instead.  or at least do something...
232         // remove from lists
233 }
234
235 /* delete the inode from disk (all data) and deallocs the in memory inode */
236 void kfs_delete_inode(struct inode *inode)
237 {
238         // would remove from "disk" here
239         kfs_destroy_inode(inode);
240 }
241
242 /* unmount and release the super block */
243 void kfs_put_super(struct super_block *sb)
244 {
245         panic("Shazbot! KFS can't be unmounted yet!");
246 }
247
248 /* updates the on-disk SB with the in-memory SB */
249 void kfs_write_super(struct super_block *sb)
250 {       // KFS doesn't care
251 }
252
253 /* syncs FS metadata with the disc, synchronously if we're waiting.  this info
254  * also includes anything pointed to by s_fs_info. */
255 int kfs_sync_fs(struct super_block *sb, bool wait)
256 {
257         return 0;
258 }
259
260 /* remount the FS with the new flags */
261 int kfs_remount_fs(struct super_block *sb, int flags, char *data)
262 {
263         warn("KFS will not remount.");
264         return -1; // can't remount
265 }
266
267 /* interrupts a mount operation - used by NFS and friends */
268 void kfs_umount_begin(struct super_block *sb)
269 {
270         panic("Cannot abort a KFS mount, and why would you?");
271 }
272
273 /* inode_operations */
274
275 /* Helper op, used when creating regular files (kfs_create()) and when making
276  * directories (kfs_mkdir()).  References are a bit ugly.  We're passing out a
277  * ref that is already stored/accounted for.  Might change that...  Also, this
278  * needs to handle having nd == 0. */
279 struct inode *kfs_create_generic(struct inode *dir, struct dentry *dentry,
280                                  int mode, struct nameidata *nd)
281 {
282         /* note it is the i_ino that uniquely identifies a file in the system.
283          * there's a diff between creating an inode (even for an in-use ino) and
284          * then filling it in, and vs creating a brand new one */
285         struct inode *inode = kfs_alloc_inode(dentry->d_sb);
286         dentry->d_inode = inode;                /* inode ref stored here */
287         TAILQ_INSERT_TAIL(&inode->i_dentry, dentry, d_alias); /* stored dentry ref*/
288         inode->i_mode = mode;
289         inode->i_ino = kfs_get_free_ino();
290         inode->i_nlink = 1;
291         inode->i_atime.tv_sec = 0;              /* TODO: now! */
292         inode->i_ctime.tv_sec = 0;              /* TODO: now! */
293         inode->i_mtime.tv_sec = 0;              /* TODO: now! */
294         inode->i_atime.tv_nsec = 0;             /* are these supposed to be the extra ns? */
295         inode->i_ctime.tv_nsec = 0;
296         inode->i_mtime.tv_nsec = 0;
297         return inode;
298 }
299
300 /* Create a new disk inode in dir associated with dentry, with the given mode.
301  * called when creating a regular file.  dir is the directory/parent.  dentry is
302  * the dentry of the inode we are creating. */
303 int kfs_create(struct inode *dir, struct dentry *dentry, int mode,
304                struct nameidata *nd)
305 {
306         struct inode *inode = kfs_create_generic(dir, dentry, mode, nd);        
307         if (!inode)
308                 return -1;
309         inode->i_flags = FS_I_FILE;
310         /* our parent dentry's inode tracks our dentry info.  We do this
311          * since it's all in memory and we aren't using the dcache yet.
312          * We're reusing the subdirs link, which is used by the VFS when
313          * we're a directory.  But since we're a file, it's okay to reuse
314          * it. */
315         TAILQ_INSERT_TAIL(&((struct kfs_i_info*)dir->i_fs_info)->children,
316                           dentry, d_subdirs_link);
317         /* fs_info->filestart is set by the caller, or else when first written (for
318          * new files.  it was set to 0 in alloc_inode(). */
319         return 0;
320 }
321
322 /* Searches the directory for the filename in the dentry, filling in the dentry
323  * with the FS specific info of this file.  If it succeeds, it will pass back
324  * the *dentry you should use.  If this fails, it will return 0 and will take
325  * the ref to the dentry for you.  Either way, you shouldn't use the ref you
326  * passed in anymore.
327  *
328  * Callers, make sure you alloc and fill out the name parts of the dentry, and
329  * an initialized nameidata.
330  *
331  * Doesn't yet handle symlinks, . or .., so don't fuck it up.  It might not need
332  * to handle the . or .., which could be handled by the VFS.  Some of the other
333  * ugliness is because KFS is exclusively using dentries to track subdirs,
334  * instead of putting it all in the inode/dir file.
335  *
336  * Because of the way KFS currently works, if there is ever a dentry, it's
337  * already in memory, along with its inode (all path's pinned).  So we just find
338  * it and return it, freeing the one that came in. */
339 struct dentry *kfs_lookup(struct inode *dir, struct dentry *dentry,
340                           struct nameidata *nd)
341 {
342         struct kfs_i_info *k_i_info = (struct kfs_i_info*)dir->i_fs_info;
343         struct dentry *dir_dent = TAILQ_FIRST(&dir->i_dentry);
344         struct dentry *d_i;
345
346         assert(dir_dent && dir_dent == TAILQ_LAST(&dir->i_dentry, dentry_tailq));
347         assert(dir->i_flags & FS_I_DIR);
348
349         TAILQ_FOREACH(d_i, &dir_dent->d_subdirs, d_subdirs_link) {
350                 if (!strcmp(d_i->d_name.name, dentry->d_name.name)) {
351                         /* since this dentry is already in memory (that's how KFS works), we
352                          * can free the one that came in and return the real one */
353                         kmem_cache_free(dentry_kcache, dentry);
354                         return d_i;
355                 }
356         }
357         TAILQ_FOREACH(d_i, &k_i_info->children, d_subdirs_link) {
358                 if (!strcmp(d_i->d_name.name, dentry->d_name.name)) {
359                         /* since this dentry is already in memory (that's how KFS works), we
360                          * can free the one that came in and return the real one */
361                         kmem_cache_free(dentry_kcache, dentry);
362                         return d_i;
363                 }
364         }
365         /* no match, consider caching the negative result, freeing the
366          * dentry, etc */
367         printk("Not Found %s!!\n", dentry->d_name.name);
368         /* TODO: Cache, negatively... */
369         //dcache_put(dentry);                   /* TODO: should set a d_flag too */
370         return 0;
371 }
372
373 /* Hard link to old_dentry in directory dir with a name specified by new_dentry.
374  * TODO: should this also make the dentry linkage, or just discard everything?*/
375 int kfs_link(struct dentry *old_dentry, struct inode *dir,
376              struct dentry *new_dentry)
377 {
378         return -1;
379 }
380
381 /* Removes the link from the dentry in the directory */
382 int kfs_unlink(struct inode *dir, struct dentry *dentry)
383 {
384         return -1;
385 }
386
387 /* Creates a new inode for a symlink named symname in dir, and links to dentry.
388  * */
389 int kfs_symlink(struct inode *dir, struct dentry *dentry, const char *symname)
390 {
391         return -1;
392 }
393
394 /* Creates a new inode for a directory associated with dentry in dir with the
395  * given mode.  Note, we might (later) need to track subdirs within the parent
396  * inode, like we do with regular files.  I'd rather not, so we'll see if we
397  * need it. */
398 int kfs_mkdir(struct inode *dir, struct dentry *dentry, int mode)
399 {
400         struct inode *inode = kfs_create_generic(dir, dentry, mode, 0); 
401         if (!inode)
402                 return -1;
403         struct dentry *parent = TAILQ_FIRST(&dir->i_dentry);
404         assert(parent && parent == TAILQ_LAST(&dir->i_dentry, dentry_tailq));
405         inode->i_flags = FS_I_DIR;
406         /* parent dentry tracks dentry as a subdir */
407         TAILQ_INSERT_TAIL(&parent->d_subdirs, dentry, d_subdirs_link);
408         atomic_inc(&dentry->d_refcnt);
409         /* get ready to have our own kids */
410         TAILQ_INIT(&((struct kfs_i_info*)inode->i_fs_info)->children);
411         ((struct kfs_i_info*)inode->i_fs_info)->filestart = 0;
412         return 0;
413 }
414
415 /* Removes from dir the directory specified by the name in dentry. */
416 // TODO: note this isn't necessarily the same dentry, just using it for the
417 // naming (which seems to be a common way of doing things, like in lookup() -
418 // can work either way.
419 int kfs_rmdir(struct inode *dir, struct dentry *dentry)
420 {
421         return -1;
422 }
423
424 /* Used to make a generic file, based on the type and the major/minor numbers
425  * (in rdev), with the given mode.  As with others, this creates a new disk
426  * inode for the file */
427 int kfs_mknod(struct inode *dir, struct dentry *dentry, int mode, dev_t rdev)
428 {
429         return -1;
430 }
431
432 /* Moves old_dentry from old_dir to new_dentry in new_dir */
433 int kfs_rename(struct inode *old_dir, struct dentry *old_dentry,
434                struct inode *new_dir, struct dentry *new_dentry)
435 {
436         return -1;
437 }
438
439 /* Copies to the userspace buffer the file pathname corresponding to the symlink
440  * specified by dentry. */
441 int kfs_readlink(struct dentry *dentry, char *buffer, size_t buflen)
442 {
443         return -1;
444 }
445
446 /* Translates the symlink specified by sym and puts the result in nd. */
447 int kfs_follow_link(struct dentry *sym, struct nameidata *nd)
448 {
449         return -1;
450 }
451
452 /* Cleans up after follow_link (decrefs the nameidata business) */
453 int kfs_put_link(struct dentry *sym, struct nameidata *nd)
454 {
455         return -1;
456 }
457
458 /* Modifies the size of the file of inode to whatever its i_size is set to */
459 void kfs_truncate(struct inode *inode)
460 {
461 }
462
463 /* Checks whether the the access mode is allowed for the file belonging to the
464  * inode.  Implies that the permissions are on the file, and not the hardlink */
465 int kfs_permission(struct inode *inode, int mode, struct nameidata *nd)
466 {
467         return -1;
468 }
469
470
471 /* dentry_operations */
472 /* Determines if the dentry is still valid before using it to translate a path.
473  * Network FS's need to deal with this. */
474 int kfs_d_revalidate(struct dentry *dir, struct nameidata *nd)
475 { // default, nothing
476         return -1;
477 }
478
479 /* Produces the hash to lookup this dentry from the dcache */
480 int kfs_d_hash(struct dentry *dentry, struct qstr *name)
481 {
482         return -1;
483 }
484
485 /* Compares name1 and name2.  name1 should be a member of dir. */
486 int kfs_d_compare(struct dentry *dir, struct qstr *name1, struct qstr *name2)
487 { // default, string comp (case sensitive)
488         return -1;
489 }
490
491 /* Called when the last ref is deleted (refcnt == 0) */
492 int kfs_d_delete(struct dentry *dentry)
493 { // default, nothin
494         return -1;
495 }
496
497 /* Called when it's about to be slab-freed */
498 int kfs_d_release(struct dentry *dentry)
499 {
500         /* TODO: check the boundaries on this. */
501         if (dentry->d_name.len > DNAME_INLINE_LEN)
502                 kfree((void*)dentry->d_name.name);
503         return -1;
504 }
505
506 /* Called when the dentry loses it's inode (becomes "negative") */
507 void kfs_d_iput(struct dentry *dentry, struct inode *inode)
508 { // default, call i_put to release the inode object
509 }
510
511
512 /* file_operations */
513
514 /* Updates the file pointer.  KFS doesn't let you go past the end of a file
515  * yet, so it won't let you seek past either.  TODO: think about locking. */
516 off_t kfs_llseek(struct file *file, off_t offset, int whence)
517 {
518         off_t temp_off = 0;
519         switch (whence) {
520                 case SEEK_SET:
521                         temp_off = offset;
522                         break;
523                 case SEEK_CUR:
524                         temp_off = file->f_pos + offset;
525                         break;
526                 case SEEK_END:
527                         temp_off = file->f_inode->i_size + offset;
528                         break;
529                 default:
530                         warn("Unknown 'whence' in llseek()!\n");
531         }
532         /* make sure the f_pos isn't outside the limits of the existing file */
533         temp_off = MAX(MIN(temp_off, file->f_inode->i_size), 0);
534         file->f_pos = temp_off;
535         return temp_off;
536 }
537
538 /* Writes count bytes from buf to the file, starting at *offset, which is
539  * increased accordingly */
540 ssize_t kfs_write(struct file *file, const char *buf, size_t count,
541                   off_t *offset)
542 {
543         struct kfs_i_info *k_i_info = (struct kfs_i_info*)file->f_inode->i_fs_info;
544         void *begin, *end;
545
546         /* TODO: handle this higher up in the VFS */
547         if (!count)
548                 return 0;
549         if (*offset == file->f_inode->i_size)
550                 return 0; /* EOF */
551
552         /* Make sure we don't go past the end of the file */
553         if (*offset + count > file->f_inode->i_size) {
554                 count = file->f_inode->i_size - *offset;
555         }
556         begin = k_i_info->filestart + *offset;
557         end = begin + count;
558         if ((begin < k_i_info->filestart) ||
559             (end > k_i_info->filestart + file->f_inode->i_size) ||
560             (end < begin)) {
561                 set_errno(current_tf, EINVAL);
562                 return -1;
563         }
564
565         /* TODO: think about this.  if it's a user buffer, we're relying on current
566          * to detect whose it is (which should work for async calls).  Consider
567          * pushing this up the VFS stack. */
568         if (current) {
569                 memcpy_from_user(current, begin, buf, count);
570         } else {
571                 memcpy(begin, buf, count);
572         }
573         *offset += count;
574         return count;
575 }
576
577 /* Fills in the next directory entry (dirent), starting with d_off.  Like with
578  * read and write, there will be issues with userspace and the *dirent buf.
579  * TODO: we don't really do anything with userspace concerns here, in part
580  * because memcpy_to doesn't work well.  When we fix how we want to handle the
581  * userbuffers, we can write this accordingly.  */
582 int kfs_readdir(struct file *dir, struct dirent *dirent)
583 {
584         int count = 0;
585         bool found = FALSE;
586         struct dentry *subent;
587         struct dentry *dir_d = TAILQ_FIRST(&dir->f_inode->i_dentry);
588         struct kfs_i_info *k_i_info = (struct kfs_i_info*)dir->f_inode->i_fs_info;
589
590         /* how we check inside the for loops below.  moderately ghetto. */
591         void check_entry(void)
592         {
593                 if (count++ == dirent->d_off) {
594                         dirent->d_ino = subent->d_inode->i_ino;
595                         dirent->d_reclen = subent->d_name.len;
596                         /* d_name.name is null terminated, the byte after d_name.len */
597                         assert(subent->d_name.len <= MAX_FILENAME_SZ);
598                         strncpy(dirent->d_name, subent->d_name.name, subent->d_name.len +1);
599                         found = TRUE;
600                 }
601         }
602         /* some of this error handling can be done by the VFS.  The syscall should
603          * handle EBADF, EFAULT, and EINVAL (TODO, memory related). */
604         if (!(dir->f_inode->i_flags & FS_I_DIR)) {
605                 set_errno(current_tf, ENOTDIR);
606                 return -1;
607         }
608
609         /* need to check the sub-dirs as well as the sub-"files" */
610         TAILQ_FOREACH(subent, &dir_d->d_subdirs, d_subdirs_link)
611                 check_entry();
612         TAILQ_FOREACH(subent, &k_i_info->children, d_subdirs_link)
613                 check_entry();
614
615         if (!found) {
616                 set_errno(current_tf, ENOENT);
617                 return -1;
618         }
619         if (count - 1 == dirent->d_off)         /* found the last dir in the list */
620                 return 0;
621         return 1;                                                       /* normal success for readdir */
622 }
623
624 /* This is called when a VMR is mapping a particular file.  The FS needs to do
625  * whatever it needs so that faults can be handled by read_page(), and handle all
626  * of the cases of MAP_SHARED, MAP_PRIVATE, whatever.  It also needs to ensure
627  * the file is not being mmaped in a way that conflicts with the manner in which
628  * the file was opened. */
629 int kfs_mmap(struct file *file, struct vm_region *vmr)
630 {
631         /* the file is not page-aligned yet, so we need to copy it to fresh pages.
632          * this should only be done once per SHARED file (inode), so only make fresh
633          * copies if people want new ones.  Also note that MAP_PRIVATE does not get
634          * carried through to the underlying file. */
635
636         return -1;
637 }
638
639 /* Opens the file specified by the inode, creating and filling in the file */
640 /* TODO: fill out the other // entries, sort vmnt refcnting */
641 int kfs_open(struct inode *inode, struct file *file)
642 {
643         /* This is mostly FS-agnostic, consider a helper */
644         //file = kmem_cache_alloc(file_kcache, 0); /* done in the VFS */
645         /* Add to the list of all files of this SB */
646         TAILQ_INSERT_TAIL(&inode->i_sb->s_files, file, f_list);
647         file->f_inode = inode;
648         atomic_inc(&inode->i_refcnt);
649         file->f_vfsmnt = inode->i_sb->s_mount;          /* saving a ref to the vmnt...*/
650         file->f_op = &kfs_f_op;
651         atomic_set(&file->f_refcnt, 1);                         /* ref passed out */
652         file->f_flags = inode->i_flags;                         /* just taking the inode vals */
653         file->f_mode = inode->i_mode;
654         file->f_pos = 0;
655         file->f_uid = inode->i_uid;
656         file->f_gid = inode->i_gid;
657         file->f_error = 0;
658 //      struct event_poll_tailq         f_ep_links;
659         spinlock_init(&file->f_ep_lock);
660         file->f_fs_info = 0;
661         file->f_mapping = inode->i_mapping;
662         return 0;
663 }
664
665 /* Called when a file descriptor is closed. */
666 int kfs_flush(struct file *file)
667 {
668         return -1;
669 }
670
671 /* Called when the file refcnt == 0 */
672 int kfs_release(struct inode *inode, struct file *file)
673 {
674         kmem_cache_free(file_kcache, file);
675         return -1;
676 }
677
678 /* Flushes the file's dirty contents to disc */
679 int kfs_fsync(struct file *file, struct dentry *dentry, int datasync)
680 {
681         return -1;
682 }
683
684 /* Traditionally, sleeps until there is file activity.  We probably won't
685  * support this, or we'll handle it differently. */
686 unsigned int kfs_poll(struct file *file, struct poll_table_struct *poll_table)
687 {
688         return -1;
689 }
690
691 /* Reads count bytes from a file, starting from (and modifiying) offset, and
692  * putting the bytes into buffers described by vector */
693 ssize_t kfs_readv(struct file *file, const struct iovec *vector,
694                   unsigned long count, off_t *offset)
695 {
696         return -1;
697 }
698
699 /* Writes count bytes to a file, starting from (and modifiying) offset, and
700  * taking the bytes from buffers described by vector */
701 ssize_t kfs_writev(struct file *file, const struct iovec *vector,
702                   unsigned long count, off_t *offset)
703 {
704         return -1;
705 }
706
707 /* Write the contents of file to the page.  Will sort the params later */
708 ssize_t kfs_sendpage(struct file *file, struct page *page, int offset,
709                      size_t size, off_t pos, int more)
710 {
711         return -1;
712 }
713
714 /* Checks random FS flags.  Used by NFS. */
715 int kfs_check_flags(int flags)
716 { // default, nothing
717         return -1;
718 }
719
720 /* Redeclaration and initialization of the FS ops structures */
721 struct page_map_operations kfs_pm_op = {
722         kfs_readpage,
723 };
724
725 struct super_operations kfs_s_op = {
726         kfs_alloc_inode,
727         kfs_destroy_inode,
728         kfs_read_inode,
729         kfs_dirty_inode,
730         kfs_write_inode,
731         kfs_put_inode,
732         kfs_drop_inode,
733         kfs_delete_inode,
734         kfs_put_super,
735         kfs_write_super,
736         kfs_sync_fs,
737         kfs_remount_fs,
738         kfs_umount_begin,
739 };
740
741 struct inode_operations kfs_i_op = {
742         kfs_create,
743         kfs_lookup,
744         kfs_link,
745         kfs_unlink,
746         kfs_symlink,
747         kfs_mkdir,
748         kfs_rmdir,
749         kfs_mknod,
750         kfs_rename,
751         kfs_readlink,
752         kfs_follow_link,
753         kfs_put_link,
754         kfs_truncate,
755         kfs_permission,
756 };
757
758 struct dentry_operations kfs_d_op = {
759         kfs_d_revalidate,
760         kfs_d_hash,
761         kfs_d_compare,
762         kfs_d_delete,
763         kfs_d_release,
764         kfs_d_iput,
765 };
766
767 struct file_operations kfs_f_op = {
768         kfs_llseek,
769         generic_file_read,
770         kfs_write,
771         kfs_readdir,
772         kfs_mmap,
773         kfs_open,
774         kfs_flush,
775         kfs_release,
776         kfs_fsync,
777         kfs_poll,
778         kfs_readv,
779         kfs_writev,
780         kfs_sendpage,
781         kfs_check_flags,
782 };
783
784 /* KFS Specific Internal Functions */
785
786 /* For obj files compiled with the kernel */
787 #define DECL_PROG(x) \
788     extern uint8_t (COUNT(sizeof(size_t)) _binary_obj_tests_##x##_size)[],\
789         (COUNT(_binary_obj_user_apps_##x##_size)_binary_obj_tests_##x##_start)[];
790
791 #define KFS_PENTRY(x) {#x, _binary_obj_tests_##x##_start, (size_t) _binary_obj_tests_##x##_size},
792
793 /*
794  * Hardcode the files included in the KFS.  PROGs need to be in sync with the
795  * userapps in kern/src/Makefrag.  Files need to be in kern/kfs/
796  * Make sure to declare it, and add an entry.  Keep MAX_KFS_FILES big enough too
797  * Note that files with a . in their name will have an _ instead.
798  */
799 #ifdef __CONFIG_KFS__
800 DECL_PROG(tlstest);
801 DECL_PROG(fp_test);
802 DECL_PROG(mproctests);
803 DECL_PROG(hello);
804 DECL_PROG(mhello);
805 DECL_PROG(pthread_test);
806 DECL_PROG(pthread_barrier_test);
807 DECL_PROG(idle);
808 DECL_PROG(tsc_spitter);
809 DECL_PROG(msr_get_cores);
810 DECL_PROG(msr_get_singlecore);
811 DECL_PROG(msr_dumb_while);
812 DECL_PROG(msr_nice_while);
813 DECL_PROG(msr_single_while);
814 DECL_PROG(msr_cycling_vcores);
815 #endif
816
817 struct kfs_entry kfs[MAX_KFS_FILES] = {
818 #ifdef __CONFIG_KFS__
819         KFS_PENTRY(tlstest)
820         KFS_PENTRY(fp_test)
821         KFS_PENTRY(mproctests)
822         KFS_PENTRY(hello)
823         KFS_PENTRY(mhello)
824         KFS_PENTRY(pthread_test)
825         KFS_PENTRY(pthread_barrier_test)
826         KFS_PENTRY(idle)
827         KFS_PENTRY(tsc_spitter)
828         KFS_PENTRY(msr_get_cores)
829         KFS_PENTRY(msr_get_singlecore)
830         KFS_PENTRY(msr_dumb_while)
831         KFS_PENTRY(msr_nice_while)
832         KFS_PENTRY(msr_single_while)
833         KFS_PENTRY(msr_cycling_vcores)
834 #endif
835 };
836
837 ssize_t kfs_lookup_path(char* path)
838 {
839         for (int i = 0; i < MAX_KFS_FILES; i++)
840                 // need to think about how to copy-in something of unknown length
841                 if (!strncmp(kfs[i].name, path, strlen(path)))
842                         return i;
843         return -EINVAL;
844 }
845
846 /*
847  * Creates a process from the file pointed to by the KFS inode (index)
848  * This should take a real inode or something to point to the real location,
849  * and proc_create shouldn't assume everything is contiguous
850  */
851 struct proc *kfs_proc_create(int kfs_inode)
852 {
853         if (kfs_inode < 0 || kfs_inode >= MAX_KFS_FILES)
854                 panic("Invalid kfs_inode.  Check you error codes!");
855         return proc_create(kfs[kfs_inode].start, kfs[kfs_inode].size);
856 }
857
858 /* Dumps the contents of the KFS file to the console.  Not meant to be taken
859  * too seriously - just dumps each char. */
860 void kfs_cat(int kfs_inode)
861 {
862         if (kfs_inode < 0 || kfs_inode >= MAX_KFS_FILES)
863                 panic("Invalid kfs_inode.  Check you error codes!");
864         uint8_t *end = kfs[kfs_inode].start + kfs[kfs_inode].size;
865         for (uint8_t *ptr = kfs[kfs_inode].start; ptr < end; ptr++)
866                 cputchar(*ptr);
867 }
868
869 /* Need to pass path separately, since we'll recurse on it.  TODO: this recurses,
870  * and takes up a lot of stack space (~270 bytes).  Core 0's KSTACK is 8 pages,
871  * which can handle about 120 levels deep...  Other cores are not so fortunate.
872  * Can rework this if it becomes an issue. */
873 static int __add_kfs_entry(struct dentry *parent, char *path,
874                            struct cpio_bin_hdr *c_bhdr)
875 {
876         char *first_slash = strchr(path, '/');  
877         char dir[MAX_FILENAME_SZ + 1];  /* room for the \0 */
878         size_t dirname_sz;                              /* not counting the \0 */
879         struct dentry *dentry = 0;
880         struct nameidata nd = {0};
881         struct inode *inode;
882
883         if (first_slash) {
884                 /* get the first part, find that dentry, pass in the second part,
885                  * recurse.  this isn't being smart about extra slashes, dots, or
886                  * anything like that. */
887                 dirname_sz = first_slash - path;
888                 assert(dirname_sz <= MAX_FILENAME_SZ);
889                 strncpy(dir, path, dirname_sz);
890                 dir[dirname_sz] = '\0';
891                 printd("Finding DIR %s in dentry %s (start: %p, size %d)\n", dir,
892                        parent->d_name.name, c_bhdr->c_filestart, c_bhdr->c_filesize);
893                 /* Need to create a dentry for the lookup, and fill in the basic nd */
894                 dentry = get_dentry(parent->d_sb, parent, dir);
895                 nd.dentry = dentry;
896                 nd.mnt = dentry->d_sb->s_mount;
897                 //nd.flags = 0;                 /* TODO: once we have lookup flags */
898                 //nd.last_type = 0;             /* TODO: should be a DIR */
899                 //nd.intent = 0;                /* TODO: RW, prob irrelevant*/
900                 /* TODO: use a VFS lookup instead, to use the dcache, thought its not a
901                  * big deal since KFS currently pins all metadata. */
902                 dentry = kfs_lookup(parent->d_inode, dentry, &nd);
903                 if (!dentry) {
904                         printk("Missing dir in CPIO archive or something, aborting.\n");
905                         return -1;
906                 }
907                 return __add_kfs_entry(dentry, first_slash + 1, c_bhdr);
908         } else {
909                 /* no directories left in the path.  add the 'file' to the dentry */
910                 printd("Adding file/dir %s to dentry %s (start: %p, size %d)\n", path,
911                        parent->d_name.name, c_bhdr->c_filestart, c_bhdr->c_filesize);
912                 /* Init the dentry for this path */
913                 dentry = get_dentry(parent->d_sb, parent, path);
914                 dentry->d_op = &kfs_d_op;
915                 dcache_put(dentry);                     /* TODO: should set a d_flag too */
916                 /* build the inode */
917                 if (!c_bhdr->c_filesize) {
918                         /* we are a directory.  Note that fifos might look like dirs... */
919                         kfs_mkdir(parent->d_inode, dentry, c_bhdr->c_mode);
920                         inode = dentry->d_inode;
921                 } else {
922                         /* we are a file */
923                         kfs_create(parent->d_inode, dentry, c_bhdr->c_mode, 0);
924                         inode = dentry->d_inode;
925                         ((struct kfs_i_info*)inode->i_fs_info)->filestart =
926                                                                 c_bhdr->c_filestart;
927                 }
928                 /* Set other info from the CPIO entry */
929                 inode->i_uid = c_bhdr->c_uid;
930                 inode->i_gid = c_bhdr->c_gid;
931                 inode->i_atime.tv_sec = c_bhdr->c_mtime;
932                 inode->i_ctime.tv_sec = c_bhdr->c_mtime;
933                 inode->i_mtime.tv_sec = c_bhdr->c_mtime;
934                 inode->i_size = c_bhdr->c_filesize;
935                 //inode->i_XXX = c_bhdr->c_dev;                 /* and friends */
936                 inode->i_bdev = 0;                                              /* assuming blockdev? */
937                 inode->i_socket = FALSE;
938                 inode->i_blocks = c_bhdr->c_filesize;   /* blocksize == 1 */
939         }
940         return 0;
941 }
942
943 /* Adds an entry (from a CPIO archive) to KFS.  This will put all the FS
944  * metadata in memory, instead of having to reparse the entire archive each time
945  * we need to traverse.
946  *
947  * The other option is to just maintain a LL of {FN, FS}, and O(n) scan it.
948  *
949  * The path is a complete path, interpreted from the root of the mount point.
950  * Directories have a size of 0.  so do symlinks, but we don't handle those yet.
951  *
952  * If a directory does not exist for a file, this will return an error.  Don't
953  * use the -depth flag to find when building the CPIO archive, and this won't be
954  * a problem.  (Maybe) */
955 static int add_kfs_entry(struct super_block *sb, struct cpio_bin_hdr *c_bhdr)
956 {
957         char *path = c_bhdr->c_filename;
958         /* Root of the FS, already part of KFS */
959         if (!strcmp(path, "."))
960                 return 0;
961         return __add_kfs_entry(sb->s_mount->mnt_root, path, c_bhdr);
962 }
963
964 void parse_cpio_entries(struct super_block *sb, void *cpio_b)
965 {
966         struct cpio_newc_header *c_hdr = (struct cpio_newc_header*)cpio_b;
967
968         char buf[9] = {0};      /* temp space for strol conversions */
969         size_t namesize = 0;
970         int offset = 0;         /* offset in the cpio archive */
971         struct cpio_bin_hdr *c_bhdr = kmalloc(sizeof(*c_bhdr), 0);
972         memset(c_bhdr, 0, sizeof(*c_bhdr));
973
974         /* read all files and paths */
975         for (; ; c_hdr = (struct cpio_newc_header*)(cpio_b + offset)) {
976                 offset += sizeof(*c_hdr);
977                 if (strncmp(c_hdr->c_magic, "070701", 6)) {
978                         printk("Invalid magic number in CPIO header, aborting.\n");
979                         return;
980                 }
981                 c_bhdr->c_filename = (char*)c_hdr + sizeof(*c_hdr);
982                 namesize = cpio_strntol(buf, c_hdr->c_namesize, 8);
983                 printd("Namesize: %d\n", size);
984                 if (!strcmp(c_bhdr->c_filename, "TRAILER!!!"))
985                         break;
986                 c_bhdr->c_ino = cpio_strntol(buf, c_hdr->c_ino, 8);
987                 c_bhdr->c_mode = (int)cpio_strntol(buf, c_hdr->c_mode, 8);
988                 c_bhdr->c_uid = cpio_strntol(buf, c_hdr->c_uid, 8);
989                 c_bhdr->c_gid = cpio_strntol(buf, c_hdr->c_gid, 8);
990                 c_bhdr->c_nlink = (unsigned int)cpio_strntol(buf, c_hdr->c_nlink, 8);
991                 c_bhdr->c_mtime = cpio_strntol(buf, c_hdr->c_mtime, 8);
992                 c_bhdr->c_filesize = cpio_strntol(buf, c_hdr->c_filesize, 8);
993                 c_bhdr->c_dev_maj = cpio_strntol(buf, c_hdr->c_dev_maj, 8);
994                 c_bhdr->c_dev_min = cpio_strntol(buf, c_hdr->c_dev_min, 8);
995                 c_bhdr->c_rdev_maj = cpio_strntol(buf, c_hdr->c_rdev_maj, 8);
996                 c_bhdr->c_rdev_min = cpio_strntol(buf, c_hdr->c_rdev_min, 8);
997                 printd("File: %s: %d Bytes\n", c_bhdr->c_filename, c_bhdr->c_filesize);
998                 offset += namesize;
999                 /* header + name will be padded out to 4-byte alignment */
1000                 offset = ROUNDUP(offset, 4);
1001                 c_bhdr->c_filestart = cpio_b + offset;
1002                 /* make this a function pointer or something */
1003                 if (add_kfs_entry(sb, c_bhdr)) {
1004                         printk("Failed to add an entry to KFS!\n");
1005                         break;
1006                 }
1007                 offset += c_bhdr->c_filesize;
1008                 offset = ROUNDUP(offset, 4);
1009                 //printk("offset is %d bytes\n", offset);
1010                 c_hdr = (struct cpio_newc_header*)(cpio_b + offset);
1011         }
1012         kfree(c_bhdr);
1013 }
1014
1015 /* Debugging */
1016 void print_dir_tree(struct dentry *dentry, int depth)
1017 {
1018         struct inode *inode = dentry->d_inode;
1019         struct kfs_i_info *k_i_info = (struct kfs_i_info*)inode->i_fs_info;
1020         struct dentry *d_i;
1021         assert(dentry && inode && inode->i_flags & FS_I_DIR);
1022         char buf[32] = {0};
1023
1024         for (int i = 0; i < depth; i++)
1025                 buf[i] = '\t';
1026
1027         TAILQ_FOREACH(d_i, &dentry->d_subdirs, d_subdirs_link) {
1028                 printk("%sDir %s has child dir: %s\n", buf, dentry->d_name.name,
1029                        d_i->d_name.name);
1030                 print_dir_tree(d_i, depth + 1);
1031         }
1032         TAILQ_FOREACH(d_i, &k_i_info->children, d_subdirs_link) {
1033                 printk("%sDir %s has child file: %s ", buf, dentry->d_name.name,
1034                        d_i->d_name.name);
1035                 printk("file starts at: %p\n",
1036                        ((struct kfs_i_info*)d_i->d_inode->i_fs_info)->filestart);
1037         }
1038 }